Как сделать так чтобы окна закрывались более плотно?

Самое простое это приклеить самоклеющий уплотнитель на какое то время хватит но потом все равно отклееться перепады температур влажность сделают свое дело. Есть такой уплотнитель он овальной формы с гребнем которым вставляеться в паз и там держиться надо снять раму с петель и сделать паз в том месте где окно примыкает к раме (в том месте куда клеиться уплотнитель) ширина паза 2 мм глубина 5 мм пропилить паз можно спецальной фрезой по дереву или ручной циркулярной электропилой где регулируеться угол и высота подъема пилы. Эту работу надо выполнять очень акуратно. Такой уплотнитель хорошо держится и дает хорошее уплотнение и служит очень долго.

Задуй пеной, ежели щели большие. А так на базаре великое множество уплотнителей для окон. Пройдись по базару.

Проложить шнур.

Надежнее будет заменить окна

В Москве есть фирмы, занимающиеся реставрацией и уплотнением старых деревянных окон

Лучше, практичнее. удобнее и в итоге дешевле - новые !
А так старый совдеповский способ: В притвор створок по всему периметру вклеиваешь поролоновую ленту ( в магазине теперь такая - самоклейка продаётся) .
Старый дедовский способ: Конопатить. заклеивать места притворов бумажной лентой.

заменить окна на металопластик

если с финансами туго, сделай проще сними старую краску на окне ираме что-бы открывалось и закрывалось легко без зацепов приклей новый уплотнитель на самоклейке (инструкция должна быть вупаковке) стекла промаж герметиком.