Bakke er født og oppvokst i Moss. Han kom til Gloppen som prest i Breim. Han ble deretter sogneprest i Breim og Gloppen og senere Prost for Nordfjord. Han var vararepresentant til Stortinget for periodene 1954–1957, 1958–1961, 1961–1965 og 1965–1969.