Древний совет ещё с советских времён: оклеить окна бумагой на зиму. Когда специальных рулонов не было в продаже, варили клейстер из муки, нарезали газеты полосками примерно 5 - 8 см в ширину и заклеивали всё окно по периметру, оставляя лишь форточку. В двойных окнах между рамами укладывали вату, тряпки (бывшие байковые халаты, носки и т. п.). Так всё и оставалось до весны, а потом полоски аккуратно удалялись, "прокладка" тоже.
В наше время продаются полоски из самоклеящейся губки. У меня в доме одно окно довольно старое, с щелями. Как заклеила их губкой 15 лет назад, так до сих пор держится. Вот такого типа (фото из Интернета, я белую нашла):
Она очень аккуратненько зашла во все щели и заполнила их собой. При этом окно можно открывать - губка "расправляется", а потом закрывать - губка опять сжимается по рельефу щелей.
Я самую дешёвую купила, а бывает ещё клейкие ленты более изысканные - полые внутри, но наклеиваются они точно также, как и обычные (см. картинку)
Продаются ещё и такие прикладываемые к дверям монстрики:
Если из-под дверей дует, а их же не заклеишь, то можно найти что-нибудь подобное (или сшить самостоятельно точно по размеру, старый чулок в помощь) и прикладывать плотно к дверям снизу.