Han er gift med Diana Mary Villiers. Sammen med henne har han 5 adopterte barn. Han er eldre bror til Nicholas Negroponte, grunnleggeren av the Massachusetts Institute of Technology's Media Lab og One Laptop per Child project. Han er også bror til filmprodusent Michel Negroponte, samt kunstneren George Negroponte.