Su padre fue Jean Baptiste Louis d'Audibert de Férussac (1745-1815), quien había publicado innumerables artículos sobre los moluscos.