Так, как Вы думаете, как должно быть, конечно, правильнее, чем так, как есть. Программа минимум - это в зазор между кирпичной облицовкой и саманом желательно пихнуть утеплитель вокруг оконного проема (или запенить) на глубину миллиметров 100 хотя бы, как уже было сказано. Также будет полезным положить утеплитель (экструдированный пенополистирол) по контуру проема в зазоре между рамами, а также утеплить откос изнутри помещения тем же полистиролом. Однако проблема, скорее всего только лишь чуть ослабнет, да и то, только в области откосов. Без установки радиаторов под каждым из окон и без утепления целиком стен Вы проблему полностью не устраните. Радиаторы под окнами дадут конвекцию воздуха (омывание теплым воздухом поверхности окна), что будет способствовать "высушиванию" конденсата. Однако это не поможет избавиться от конденсата и наледи между рамами, поскольку теплый и влажный воздух будет просачиваться через щели притвора внутренней рамы в зазор между рамами, где остывая, будет отдавать влагу в виде конденсата на холодные поверхности.
Будет ли хуже, если будет "не дует" после установки герметичных окон, в контексте, что влажность может еще больше увеличится, то думаю, что в Вашем случае это не сильно ухудшит (а то и наоборот улучшит) существующую ситуацию, поскольку практически исчезнет эксфильтрация через щели во внутренней раме.