James Griffiths var sønn av James Henry og Helen Agatha ( O'Neil) Griffiths. Han fik ksin første skkolegang ved fra 1915 til 1919. Han fortsatte ved St. John's University i Brooklyn, der han tok en Bachelor of Arts i 1923.