トークルームを削除しても、自分のLINEから非表示になるだけです。相手のトークルームは変わらないので、相手側に知られることはありません。