Вы его давно знаете и он так раньше себя вел - вас устраивало, вы же понимаете, что человек не меняется. Так что вы выбрали не подходящий момент реагировать на его слова. Если человеку не нужна семья - он идет и разводится, сам-сам. А если не разводится - то затыкается и идет выполнять свои супружеские обязанности. Так ему и скажите, а не рефлексируйте.