Verwarm de oven voor op 180 graden C. Vet bakplaten in.
Mix in een grote kom de boter en suiker tot een romig geheel. Mix de vanille en eieren erdoor.
Meng in een andere kom door een zeef de bloem, bakpoeder en zout; mix dit door het eimengsel, afwisselend met de melk.
Rol het deeg op een licht bebloemd oppervlak uit tot ongeveer 1/2 cm dik. Snijd hieruit strips van 1/2 tot 1 cm en vorm hier raamwerkjes van (of snij er andere vormpjes uit, met een gat in het midden).
Doe de snoepjes in stevige plastic zakjes (hou de kleuren apart) en vermaal ze met bijvoorbeeld een vleeshamer. Doe de gemalen snoepjes in de openingen van de koekjes.
Bak de koekjes 6 minuten, tot het snoep gesmolten is. Laat 5 minuten afkoelen op de bakplaat, totdat het snoep weer hard is. Verwijder voorzichtig de koekjes van de plaat met een spatel.