Det er funnet sommerløer fra første halvdel av 1600-tallet på stedet. Man regner med at ryddingen av gården begynte fra slutten av 1700-tallet og et første fjøs er datert til 1792. Grunneier i området var bispesetet i Kristiansand, men jorda var bygslet til bonden som drev hovedgården i Songesand. Bakken var fra starten en husmannsplass under Songesand, kjøpt fri i 1841. Etter det var beboerne på Bakken leilendinger og betalte mellom 10 og 20 kroner årlig i jordleie til bispesetet. Midt på 1920-tallet kjøpte Bakken-folket gården med utmark.