Il s'associe avec ses frères dans des comptoirs commerciaux. À la suite d'un important incendie touchant les États du sud en , les frères Lazard s'installent à San-Francisco, en pleine fièvre de l'or. Rejoint par la suite par leur cousin Alexandre Weill, ils font évoluer leur comptoir commercial vers la banque, tout en poursuivant leurs activités d'import-export, donnant naissance à Lazard frères et.