Etter de tolv årene i utlandet ble Sergel kalt tilbake til Sverige av kong Gustav III. Nokså motvillig dro Sergel til Stockholm – han hadde akkurat blitt innvalgt inn i Det franske kunstakademiet og utnevnt til kongelig billedhugger. Sergel var også invitert av Katrina II til Russland, men dro aldri. I stedet ble Sergel i 1780 utnevnt til professor ved kunstakademiet i Stockholm.