Тут чисто ваше решение, отягчающее есть то, что дети есть и от них никуда не денешься. Должны понимать, что в один прекрасный момент (дети ведь расстут) они захотят жить с папой, например. Готовы их принять? Если да - вперёд! Я тоже отец троих детей от первого брака, так сложилось что дети со мной. Женился, у супруги тоже дочь, дети приняли друг друга как родные, ну и мы довольны, никого не делим на своих и чужих.