Деревянные окна могут утепляться как снаружи так и изнутри, или и снаружи и изнутри.
Наружное утепление лучше выполнять до наступления холодов и чаще всего речь идёт о частных домах.
Определитесь где именно проблема.
Осмотрите (снаружи) раму окна по периметру.
Если есть щели, или отошла штукатурка в районе рамы и оконного проёма, сбиваем старую штукатурку, увлажняем поверхность и задуваем щели монтажной пеной.
Просушка, подрезка пены и заделка её раствором цементно-песчаным.
Далее можно покрасить, краска нужна фасадная.
Если речь об утеплении изнутри и только, то самый бюджетный вариант, это бумага.
Бумагу сворачиваем в трубочку увлажняем её и забиваем все щели
(заполняем).
Или же измельчите бумагу на куски, замочите ей в воде, добавьте муку и мел, это самодельная замазка, этой замазкой заполняем все щели.
Вместо газет можно использовать бумагу, вначале режем бумагу на полоски нужной ширины, я резал полоски ориентировочно 5-6 см по ширине, приклеивал и к раме и к откосам.
Далее готовим обычный мыльный раствор и оклеиваем раму окна по периметру этими полосками (вместо клея мыльный раствор).
Или же (это вместо бумажных полосок) можно оклеить окно вот таким
малярным скотчем, при наступлении тепла он снимается с окна, следов клея не оставляет.
Перед оклеиванием бумагой, можно открыть сворки (имеется в виду рама окна с двойным остекленение) и положить между ними вату.
Щели можно забить ватой (лучше технической) или тряпками.
Если в доме очень холодно, то можно вообще всё окно заклеить плёнкой.
Отрезаем плёнку по размеру окна и фиксируем её к поверхности скотчем.
Плёнка создаёт дополнительную воздушную прослойку между помещением и улицей, естественно нужна прозрачная плёнка.