Евгения, думаю окна в этом случае не придется менять. Нужно найти в деревянном профиле дырочки, где могут быть скопления жуков-короедов.
В щели и дырочке в дереве можно впрыснуть из шприца жидкие инсектициды: хлорофос и хлородан. Если дырок много, то поверхность нужно смазать кистью инсектицидом, 2-3 раза с перерывом в несколько дней. Если повреждения дерева очень большие, то лучше заменить этот кусок древесины.