Charlotte Ah Tye berkahwin dengan peguam kelahiran Cina, Hong Yen Chang pada 1897, di San Francisco. Mereka mempunyai dua orang anak, Ora Ivy Chang (1898-1929) dan Oliver Carrington Chang (1900-1973). Pada tahun 1906, Charlotte Chang dan dua anaknya terselamat daripada gempa bumi San Francisco yang dahsyat dan tinggal bersama kawan-kawan serta membantu usaha bantuan gereja di Oakland.