Herbert Plumer vokste opp som annen sønn av en familie fra middelklassen i Yorkshire. Foreldrene var Hall Plumer og hans hustru Louisa Alice Plumer (født Turnley). Han fikk utdannelse fra Eton College. Etter endt skolegang der gikk han inn i hæren, og begynte offisersutdannelsen i Sandhurst.