Keiser Otto ble rasende over utnevnelsen, marsjerte til Roma, beleiret Benedikt og avsatte ham 23. juni 964. På synoden hvor han ble avsatt, ble pavestaven knust over hans hodet av Leo VIII, noe som er den første omtale av en pavestav. Det er mer sannsynlig at Benedikt ble styrtet, fremfor at han trakk seg frivillig og innrømmet å være ulovlig utnevnt.