Andriantsoly hadde ni ektefeller av gassisk, komorisk, afrikansk og arabisk opphav og fikk tretten barn. Han døde overvektig og alkoholisert i sitt palass på Mayotte.