お客様はもちろんあなたを信頼して契約した部分もあると思いますが、最終的には保険を提供している会社の信頼性で判断しているはずです。
また、何十年も入り続ける保険では、担当の営業が辞めることは珍しくありませんので、退職を後ろめたく思う必要はありません。