Han var fra adelsslekten Sinzendorf som stammet fra Oberösterreich og ble født i Paris mens faren var ambassadør for den tysk-romerske keiseren Josef I.