Pasteur ble født i familehuset i Dole og vokste opp i den nærliggende byen Arbois. Han var den eneste sønnen av Jean Pasteur. På grunnskolen var Louis ikke noen lysende elev. Han foretrakk å fiske og å tegne framfor andre akademisk arbeid.