オックスはオハイオ州シンシナティのドイツ系ユダヤ人の家庭に生まれた。両親ともにドイツからの移民だった。父のユリウス(Julius)はバイエルンの出身で、1846年に渡米した。ユリウスは高度な教育を受け、6つの言語に堪能であり、南部各地の学校で教師をしていた。南北戦争中は北軍を支持していた。母のベルタ（Bertha、旧姓レビ(Levy)）はプファルツ地方の出身で、1848年革命の際に難民として渡米した。1853年にユリウスと結婚するまではアメリカ南部に住んでおり、南北戦争では南部に同情的だった。しかし、考え方の違いはあっても2人が離婚することはなかった。