El padre de Ellis era un hombre de negocios, actividad en la que tuvo poco éxito, y por la que convivió poco con sus hijos con los que además era poco cariñoso.