Løvenørn blev født i Berlin, fordi hans far, gehejmelegationsråd, kammerherre Frederik Ernst Vendelbo de Løvenørn (1798-1849), var legationssekretær på stedet. Hans farfar var kontreadmiral Poul de Løvenørn. Løvenørn kom dog tidligt til Danmark, fordi hans far i april 1848 på grund af krigsbegivenhederne måtte forlade den post som ministerresident i Hamborg, som han var tiltrådt året i forvejen. Han slog sig ned i København, men døde allerede det følgende år af hjernebetændelse (encephalitis). Løvenørns mor var Elisabeth Christine Eleonore Beyer (født i Warszawa 1804).