Burton nació en Torquay (Devon) a las 21:30 del 19 de marzo de 1821 (en su autobiografía, declara erróneamente haber nacido en el hogar familiar de Barham House en Hertfordshire).