Sein Vater war der Goldschmied Joseph Lucy Le Breton (* 1796), seine Mutter Louise Adèle Dievre (* 1799). Louis Lucy Le Breton heiratete 1850 in Orléans Anna Bidault (1827–1898). Sie hatten fünf Kinder, von denen vier das Erwachsenenalter erreichten. Der Sohn Georges (1862–1913) betrieb nach dem Tod des Vaters dessen Unternehmen weiter, firmierte unter „Le Breton &amp; fils“ und nahm an der Weltausstellung in Paris 1900 teil.