Patrick O'Brian var sønn av en tyskættet lege og en engelsk mor av irsk avstamming. Moren døde da han var tre år og biografene beskriver en barndom preget av sykdom, sporadisk skolegang og lange perioder hjemme med faren og stemoren.