Ooty var opprinnelig et "stamme-land" og bebodd av Toda-stammen og andre stammer som levde sammen og drev handel. Viktigste stammer I Nilgiris var Nilagiri var Toda-stammen, Kotas, Badagas og Alu Kurumbas, som slo seg ned i og rundt Ooty. Det første spor av Toda i Nilgiri er funnet i opptegnelser fra år 1117 e.Kr. Toda-folket er kjent for kvegdrift med vannbøfler og Badaga-stammen for sitt jordbruk. I sin bok skriver den engelske historikeren Frederick Price at området ble kalt "Old Ooty" og hærtatt av Toda-stammen som overga sin del av byen til John Sullivan som da var guvernør i Coimbatore. Sullivan utviklet senere byen og oppfordret folk til å plante te, kanel og teak-trær som mange andre bosettere. Sullivan var meget imponert over måten stammene samarbeidet og søkte å holde dette vedlike. Han kjempet senere utrettelig for å sikre stamene rett til eiendommene for at deres kultur skulle anerkjennes, men ble finansielt og kulturelt straffet av den britiske regjering.