David Burnet mistet begge sine foreldre i barndommen; de var dr. William Burnet og hans annen hustru Gertrude Gouverneur Rutgers, enken etter Anthony Rutgers (en bror av Henry Rutgers som grunnla colleget som etterhvert ble Land-grant-universitetet Rutgers). Faren hadde sittet i den kontinentale kongressen.