Byng ble født i 1965 og vokste opp i den lille engelske landsbyen Abbots Worthy i Hampshire i sørlige England. Hun er den eldre datteren og det andre barnet av den åttende jarlen av Strafford og hans første hustru Jennifer May. Georgia Byng giftet seg første gang med Daniel Chadwick i 1990, og skilte seg fra ham i 1995. De har en datter sammen, Tiger Rose, som ble født i 1991. Hun lever nå med sin andre ektemann, kunstneren Marc Quinn, og sine tre barn, datteren Tiger og sønnene Sky og Lucas.