И квартира не ваш (про совесть - ха-ха), и себя явно не ощущаете самостоятельной личностью - красиво уйти/выгнать не сможете. Сходите к психологу, что  не мучиться ночными сексуальными кошмарами. Ну, загулял, но вроде не серьезно. Тем более, что там полная дура.Хотя звоночек неприятный.Но вы подумайте - с ним гулящим (тайно) вам  хуже, чем вообще без него. Сможете  быть самостоятельной единицей, а не замужней половинкой?