Jabarkan Masa kecil dari Kenneth J. Alford

Ricketts dilahirkan 21 Februari 1881, sebagai anak keempat dari Robert dan Louisa (née Alford) Ricketts di Thameside, Ratcliff, East End, London. Tempatnya dilahirkan berada dalam jangkauan terdengarnya lonceng gereja Bow Bells di Gereja St. Mary-le-Bow, Cheapside sehingga sesuai tradisi ia berhak disebut sebagai orang Cockney asli. Kedua orang tuanya juga orang London asli. Ayahnya adalah pedagang batu bara di Ratcliff, sisi utara Sungai Thames, dekat Limehouse. Adiknya bernama Randolph Robjent, lahir 9 Desember 1884, nantinya juga dikenal di kalangan musik militer dengan nama Leo Stanley.

Ketika berusia 7 tahun, ayahnya meninggal dunia. Ibunya meninggal dunia ketika ia berusia 14 tahun. Pendidikan musik didapatnya dengan belajar bermain piano dan organ, serta menjadi anggota koor jemaat Gereja St. Paul. Sebagai anak laki-laki kelahiran East End London, ia pasti sering mendengar musik yang dimainkan pemusik jalanan, termasuk band-band Jerman dan korps musik Bala Keselamatan. Sebagai anak yatim piatu, Ricketts memastikan pilihan masa depannya sebagai anggota korps musik militer. Sepanjang hidupnya, anggota keluarga dan teman-teman memanggil dirinya, "Joe".