Действовать следует по алгоритму:
Откройте створку окна.
Удалите старую уплотнительную ленту.
Хорошо зачистите пазы, удалив весь мусор.
Уложите по периметру новую уплотнительную ленту.