Albert Bitter var sønn av legen Johann Heinrich Bitter og hans hustru. Faren var geheime Sanitätsrat og kretsfysikus, og mottok i 1876 æresborgerskap i Melle for sine fortjenester i helsevesenet.