Вообще, если щели действительно большие и кона видимо старые, то конечно лучше всего их поменять. Но если таких вариантов нет, то тогда необходимо как следует зашпатлевать эти стыки, если щели очень большие, то понадобиться цементная смесь. Можно сделать сендвич: цементная смесь, подложки для звукоизоляции и снова цементная смесь или уже шпатлевка.
А потом либо грунтуете поверхность и клеите обои или чем вы отделываете стены в квартире. Или можно купить специальную фурнитуру для отделки окон и прикрепить ее. Ограничиваться только ей одной я бы не советовала: будет холодно и шум с улицы будет проникать.