Разводиться не нужно, если он вам нужен. Но по башке настучать, четко озвучив, что вам не комфортно и он может выметаться, если он этот некомфорт не уберет - можно и нужно . По раскладам у вас сильная позиция, ибо вы правы, а муж накосячил.