Desde el momento de su nacimiento, Robert era un niño enfermizo y de salud débil, lo que hizo que su madre lo sobreprotegiera hasta límites exagerados, como por ejemplo amamantarlo hasta la edad de 6 años, es por esto que Jon Arryn pretendía enviarlo como pupilo de Stannis Baratheon a Rocadragón.