Iemitsu hadde en velkjent homoseksuell levemåte og det spekuleres at han var den siste etterkommeren av Tokugawa Ieyasu, slik at den patrilinjeære nedstamning dermed ble avsluttet med Iemitsu. miniatyr|De tre apene vid pagodene i Nikko, inntil minnetempelet over Tokugawa Ieyasu Tokugawa Iemitsu oppførte i 1636 et minnetempel i Nikko for å gjøre sin farfar Tokugawa Ieyasu til kami, en guddom innen shinto.