Fiska var sannsynligvis navnet på elva som nå kalles Fiskumelva, en elv som er rik på fisk. Navnet var på gammalnorsk (eldre ), som betyr «heim ved Fiska». I gamle dokumenter og kart kan man se skrivemåter som Fiskeim og Fischum. Gårdene rundt elva har sannsynligvis fått navnet etter elva. Også Fiskum gamle kirke, som er bygdas viktigste kulturminne, ligger ved elva. Kirkebygget er fra 1250 og er dermed Eikers desidert eldste bygning. Denne kirken står på Prestgarden ved Fiskumvannet. Garden Prestgarden, som kalles dette fordi den lenge har vært prestegarden for sognet, ble opprinnelig skilt ut fra garden Fiskum. Det var to setegårder på Fiskum, Nedre Fiskum og Skjelbred.