Bernard Francis Casey wurde am 15. November 1870 auf einer Farm in Oak Grove als sechstes von 16 Kindern der irischen Immigranten Bernhard James Casey und Ellen (geb. Murphy) geboren. Seine Eltern lernten sich in Biddeford in Maine kennen und heirateten am 6. Oktober 1863, nachdem beide Irland aufgrund der Großen Hungersnot verlassen hatten. Casey wuchs mit seiner Familie in einer 4 mal 10 Meter großen Blockhütte auf und durchlief in seiner Kindheit die genuin irisch-katholische Sozialisierung. Er wurde am 18. Dezember 1870 getauft.