Asurbanipal vokste opp i et lite palass kalt for («arverekkefølgens hus»), bygd av hans bestefar Sankerib da han var en kronprins i den nordlige kvadrant av Nineve. I 694 f.Kr. hadde Sankerib fullført «Palasset uten rivaler» i det sørvestlige hjørnet av akropolis og revet det meste av de gamle strukturene. Det førstnevnte palasset ble boligen til Asarhaddon, kronprinsen. I dette huset ble Sankerib myrdet av Asurbanipals onkler som bare kan identifiseres gjennom den bibelske fortellingen som Adrammelek og Sareser. På grunn av denne konspirasjonen ble Asarhaddon konge i 680 f.Kr. Han fortsatte med å bygge om sin bolig («våpenhuset» eller «arsenalet»). («arverekkefølgens hus») ble etterlatt til Asurbanipals mor og de yngre barn, blant annet Asurbanipal.