Era hijo de Gerard van Swieten, médico de la emperatriz María Teresa I de Austria.