Etter forhandlinger med Højre og en fløy av det tidligere Moderate Venstre gikk De Frikonservative sammen med disse om å danne Det Konservative Folkeparti i 1915. Da Rottbøll ble ekskludert fra Det Konservative Folkeparti i 1917, ble De Frikonservative gjenopprettet av fem landstingsmenn og én folketingsmann. Denne partidannelsen ble av mindre betydning, ettersom Rottbøll var den eneste frikonservative som ble gjenvalgt til Landstinget året etter. Han satt der frem til 1920.