I Norge er steinstuer spesielt knyttet til Tjøme og Nøtterøy i Vestfold, der typen ofte knyttes til innvandring av fattige svensker midt på 1800-tallet. Steinstuene kan allikevel ikke uten videre knyttes til den svenske betegnelsen «backstuga» (som betyr ), som var en liten fattigslig bolig (husmannsplass) uten egen jord (det motsatte av et torp, en husmannsplass med jord), reist på andres mark (ofte på steingrunn eller mark som ikke kunne utnyttes), men ikke nødvendigvis reist av stein.