Allerede i 1803 ble det tatt til orde for et fyr på Svenner, men nærheten til Færder gjorte at forslaget ble avvist av de danske myndighetene. Forslaget om et fyr på Svenner kom opp igjen i 1867, men daværende fyrdirektør Carl Fredrik Diriks avviste ideen. Stortinget bevilget allikevel penger til etablering av et fyr, stikk i strid med anbefalinga fra fyrdirektoratet.