Edward Somerset var tredje sønn av Henry, 5. hertug av Beaufort, hans mor var Elizabeth (d. 1828), datter av admiral Edward Boscawen. Lord Fitzroy James Henry Somerset, første baron Raglan var hans yngre bror. Han ble utnevnt til kornett i The 10th (Prince of Wales's Own) Regiment of (Light) Dragoons den 4. februar 1793, løytnant den 10. desember 1793, og kaptein 16. september 1794. Han var aide-de-camp for hertugen av York under ekspedisjonen til Noord-Holland andre halvår 1799 hvor en britisk-russisk styrke invaderte og ble slått tilbake av franske styrker. Han ble forfremmet til major i The 12th (Prince of Wales's) Regiment of (Light) Dragoons den 26. november 1799, hvorfra han ble overført tolv måneder etterpå, den 22. november 1800, til The 28th (Duke of York's Own) Regiment of Light Dragoons. Den 3. februar 1801 ble han utnevnt til oberstløytnant i regimentet The 5th (Northumberland) Regiment of Foot, hvorfra han året etter ble overført til The 4th (Royal Irish) Dragoon Guards. Fra 1799 til 1802 var han parlamentsmedlem for the Monmouth boroughs. Han ble igjen innvalgt for Gloucestershire i 1803 og fortsatte å representere kretsen inntil 1829.