Han ble født i en diplomatfamilie i Litauen. Faren var Stasis Bačkis og moren lærerinnen Ona Galvydaitė-Bačkienė. Familien ble tvunget til å bli i Vesten etter annen verdenskrig på grunn av den sovjetiske okkupasjonen av hjemlandet.