Yokoyama nació en Kobe, aunque pasó su infancia en la prefectura de Tottori con su familia para evacuarse de la Segunda Guerra Mundial.