Kittery, Maine
В 1760 году Салливан женился на Лидии Ремик Востер из Киттери; в их семье было шесть детей: Марджери (умерла в детстве), Лидия, Джон, Джеймс, Джордж (впоследствии депутат нью-джерсийской легислатуры) и вторая Марджери, которая тоже умерла в детстве.