тс, вся ситуация не видна. но вроде у тебя вагонка. как бы я сделал.(замена) желательно вдвоем, и без жены.
1)выдолбал бы разрезал так, что бы вырвать середину.пену снизу подрезать естественно вдоль подоконника.
2) после этого аналогично вырвать левые и правый куски, вытащить их из вагонки.
3) новый подоконник, должен быть на 1-2 см больше чем расстояние между стенами(чуть больше чем до вагонки)
4)вычищаешь всю пену за выгонкой, там по идеи брус+ вагонка есть запас сантиметра 4.
5) примеряешь новый подоконник.смотри где какие щели, может что подложить нужно.
6) если все становится- вытаскивай.
7) пенишь место укладки. особенно ближе к окну. и аккуратно не засри все.
8) аккуратно вставляешь подоконник, ты это уже делал, должно получится норм.
на балконе должно быть тепло. лучше эту работу летом делать. если зимой- за сутки до начала работ обеспечь +20 на балконе. и сутки после. в морозостойкость пены не верь.