El 19 de septiembre de 1785, Astor se casó con Sarah Cox Todd (1762-1842), la hija de los inmigrantes escoceses Adam Todd y Sarah Cox.