Эта фраза не говорит впрямую о том, что он с ней изменял. Возможно, это просто ее фантазии, или провокация с ее стороны. А вообще, даже самые верующие оступаются. Тут надо наверное тему веры пока оставить, и решать вопрос как все в таких случаях: живем вместе или не живем.