Hallem har i hovedsak vært delt opp i fire gårder, men har nok tidligere også vært bare to gårder, Øvre Hallem og Store Hallem. Det har eksistert og finnes fortsatt flere gårder i Hallem som er fradelte bruk fra disse gårdene.