Han var interessert i klassisk kinesisk litteratur allerede fra ung alder, samt av de litterære verkene til Mori Ōgai og Natsume Sōseki. I 1916 ble han forlovet med Fumi Tsukamoto, som han giftet seg med i 1918. De hadde tre barn sammen: Hiroshi Akutagawa (1920–1981) var skuespiller, Takashi Akutagawa (1922–1945) ble drept i Burma, og Yasushi Akutagawa (1925–1989) var komponist.