被害者が自立しようとすると、中傷や罵倒などの精神的な暴力を振るい始める。だが、モラル・ハラスメントのメカニズムが機能しているかぎり、加害者の心には安寧がもたらされるので、被害者以外の人には「感じのいい人」として振る舞うことが出来る。そのため、その人が突然モラル・ハラスメントの加害者として振る舞ったとき、周囲には驚きがもたらされ、時にはハラスメントの否認さえなされる。故に、被害者は自分のほうが悪いのではないかと逡巡し、暴力行為自体は相手が悪いが、原因は自分にあると思考してしまう。
モラル・ハラスメントの加害者が行う個々の攻撃行動は、普通の人でもやってしまうことがあるものだが、普通の人はためらいや罪悪感を伴ってしまうところを、「本物の加害者」は自身のほうが被害者だと考える。反対に、耐えかねた被害者が加害者に肉体的な暴力をふるってしまうこともよく起こる。加害者がそのように仕向けることすらある。
「自己愛的な変質者」、この人達は人々をひきつけ支配下に置き価値観の基準をひっくり返すことができる。集団に混じっていれば集団的倫理観が破壊されてしまう。
加害者は自分のしていることを周りにも、相手にも気づかれないようにして、巧みに被害者を傷つけていく。その結果、被害者は、肉体的にも精神的にもかなり苦しんでいるのにその苦しみの原因がわからず、時には随分時間がたってからようやく自分がモラルハラスメントを受けていた事に気づく。また、何年も経過した後でも被害者は、行動する度に加害者から言われた中傷誹謗や軽蔑の言葉が頭に蘇り、心的外傷後ストレス障害（PTSD）に長期的に悩み苦しむこともよくある。
加藤諦三による例示.
親に「勉強しなさい」と言われて子供が「イヤだ」と言っているような関係なら、モラルハラスメントは成立しない。しかしモラルハラスメントが成立していると「なんで誰々さんのようになれないの」と言われて「あんたの子供だからだよ」とはとても言い返せない。
モラル・ハラスメント加害者の人格・心理構造.