På denne tiden kom Patmores far i økonomiske vanskeligheter, men adelsmannen Richard Monckton Milnes skaffet ham i 1846 en stilling som assisterende bibliotekar ved British Museum, en posisjon han hadde i de neste nitten år, mens han skrev dikt i fritiden. I 1847 giftet han seg med Emily Andrews, datteren av en lege. Ved museet startet han en frivillig geværkorps, opphisset av faren for en fransk invasjon. Han skrev leserbrev til avisen The Times om dette.