Вам нужно решиться на разговор  с ним, очень серьезный. Выложить ему все. Сказать, что вы любили другого человека, и любили как вам казалось взаимно. А сейчас что-то уходит, потому что между вам пропала близость, что вам пока плохо без его внимания, но что скоро так и привыкните. И готов ли он вас потерять совсем. А к этому идет. ПС морда кирпичом - плохой знак.