Sønnen ble født i London i 1828 som ekteparets andre barn, og han ble opprinnelig døpt Gabriel Charles Dante Rossetti, men han endret senere rekkefølgen på navnet for å markere sitt slektskap med den store italienske poeten Dante Alighieri. Familien og venner kalte ham dog for Gabriel. Han var bror til poeten Christina Rossetti (1830–1894), kritikeren William Michael Rossetti (1829–1919), og forfatteren Maria Francesca Rossetti (1827–1876), og han var grunnlegger av Det pre-rafaelittiske broderskap, en engelsk kunstretning på 1800-tallet, sammen blant andre John Everett Millais og William Holman Hunt.