Bunicul său Kan Abe a fost politician, la fel ca tatăl său, Shintaro Abe, care a fost ministru de externe.