我和他都是一个有家庭的人,都有孩子,但是我们都做了对不起家里的事,现在我知道自己错了,不想和他在一起了,可是他一直纠缠着我不放,还每天打我电话骚扰和威胁我,之前我答应可以和他出去喝喝茶聊聊天,其它的是不可以的,可是他不知足,他就想从我身上得到性,但是我真的意识到自己的错误了,我不想再这样继续下去了,所以我是绝对不可能在和他上床了,但是他现在就拿这个来威胁我说要告诉我的老公,婆婆,公公让我们那所有的人都知道我的丑事,他也知道我的家住哪里,有时候不接他电话,他就会故意去我们家门口转,我现在真的受不了他这样精神上的折磨了,但是我又不能让家里知道,谁能告诉我我到底该怎么做呢?