કાલિગુલાને લઈને ઈતિહાસમાં એ વાતો પણ નોંધાયેલી છે કે, તેણે તેની બહેન સાથે શારીરિક સંબંધો હતા. કિશોરાવસ્થામાં કાલિગુલા તેની પરદાદી સાથે રહેતો હતો. આ દરમિયાન તેની બહેન જૂલિયા ડૂસિલા સાથે સંબંધ બની ગયા. મનાય છે કે, કાલિગુલાની દારિદ્રયતા બહેનના લગ્ન પછી પણ ચાલુ રહી. આટલું જ નહીં તેના પરિવારની સ્ત્રીઓ અને બહેનો સાથે સંબંધ બનાવીને તેને વેશ્યાવૃતિ માટે વેચી દીધી.