Cellini ble beskyldt for under Romss beleiring å ha tilegnet seg pavelige edelstener og andre smykker og ble satt i et av Engelsborgens fangehull. Det lyktes ham å flykte – han skildrer selv sin flukt overordentlig levende – men ble atter fengslet og fikk først ved venners inngripen sin frihet i slutten av 1539.