Как запенить узкую щель под подоконником?

Под подоконником образовалась щель небольшая, из которой неплохо так дует. Заклеить спец лентой или замазать щель герметиком и прочим (не заливая все внутри) не срабатывает. Это просто отваливается и все. К тому же там, за щелью, большая полость останется холодной (

Подскажите, кто знает. Спасибо