日本プロ野球界に関連する彼の伝説は数知れず、自ら「俺は最後の独裁者だ」と語ったとされ、マスメディアにおいて「球界の独裁者」または単に「独裁者」と呼ばれていることについては、渡邉自身が認めている。