Omkring tre kilometer sør for kirken ligger også den gamle «kongsgården» , kjent som sete for Halvdan Svarte, far til Harald Hårfagre. Siden sete for Sigurd Syr, stefar til Hellig Olav og far til Harald Hardråde. Også på Stein har det stått ei mindre (privat) kirke, bygget over samme lest som Norderhov kirke, og ruinene etter denne står der fortsatt. Stein kirkeruin og Norderhov kirke dateres gjerne samtidig. De er også så like konstruksjonsmessig at mange eksperter mener de må være bygget av samme hånd (mester).