Можно утеплить самоклеящейся лентой из резины и поролона, такая лента подходит и для окон, и для входных дверей. Но она недолговечна, лишь пару лет прослужит. И сколько бы вы не утепляли деревянные окна, самый лучший вариант - это заменить их на пластиковые. Разница будет очень ощутимая. У нас в квартире после установки ПВХ окон зимой температура поднялась с +20 до +26 при одинаковом нагреве батарей. Балкон застеклить, конечно, дороже получится, но можно попробовать остеклить не ПВХ, а металлопрофилем и обычным стеклом - мой отец так сам остеклял балкон, хоть небольшой эффект, но дало - защита от ветра и разница температуры на балконе с уличной примерно 10 градусов.