Tollefsrudgårdene ligger på nordsiden av E16, like øst for Begnadalen kirke, som ble nybygd i 1964 etter at den gamle kirken brant i 1957. Nordvest for kirken er Begnadalen skole, og like ved siden av holder Sør-Aurdal Energi til.