Serien utspelar sig i huset "165 Eaton Place" i London, där parlamentsledamoten Richard Bellamy bor med sin hustru Lady Marjorie och deras barn. I huset finns en rad av tjänstefolk, från den mycket korrekte Mr Hudson och den bistra Mrs Bridges via den rättrådiga kammarjungfrun Rose, till den hunsade kökspigan Ruby. I seriens början är året 1903 och i sista avsnittet har man hunnit fram till 1930. Serien har med viktiga historiska händelser under 1900-talet, som bland annat förlisningen av Titanic (1912), första världskriget (1914–1918) och börskraschen på Wall Street 1929.