Jabarkan Asal mula dari Pas-ta'ai

Orang-orang Kecil yang digambarkan berkulit gelap dengan perawakan seperti orang kerdil telah menggiring pada teori dan asosiasi dengan orang Negrito dari Asia Tenggara. Saat ini tak ada kesepakatan ilmiah mengenai apakah Orang-orang Kecil ini asal mula praAustronesia, jika memang keberadaan mereka benar. Sebagian antropologis berpendapat mungkin mereka orang-orang ras Australoid yang tiba dari Afrika selama awal pemencaran bagian Selatan sekitar 60.000 tahun yang lalu. Orang-orang Tsou, Bunun, dan Paiwan dari Taiwan (di antara yang lainnya) juga memiliki tradisi oral keberadaan orang-orang pendek seperti kerdil yang memiliki ciri-ciri antropomorfik yang sama dengan orang Negrito, kemungkinan menimbulkan pikiran penyebaran keberadaan Negrito di Taiwan sebelum migrasi orang Austronesia, meskipun tidak ditemukan bukti fisik yang mendukung keberadaan mereka. Sebuah kajian genetik tahun 2019 yang membandingkan penanda genetik Negrito Filipina dengan beberapa masyarakat adat Taiwan tidak mendapatkan kesimpulan dalam temuan-temuannya; "Peleburan mendalam B4b1a2 dalam Negrito Filipina, Saisiyat, Atayal, Pulau Asia Tenggara, dan Asia Tenggara mengesankan akar leluhur yang sama secara mendalam, tapi tidak dapat mendukung keberadaan Negrito masa lalu di Taiwan. Sebaliknya, komponen budaya dan mtDNa haplogrup D6a2 yang sama dalam Negrito Saisiyat, Atayal dan Filipina menandai ciri khas Negrito di Taiwan. Meskipun variasi molekuler D6a2 memastikan keberadaannya di Taiwan jauh ke masa pertengahan Neolitik, penanda lainnya, Y-SNP haplogrup C-M146 dan K-M9, menjamin analisis yang lebih jauh."

Antropologis Gregory Forth berpendapat bahwa asal mula yang sama terdapat di antara tradisi orang Taiwan dan cerita Melayu-Polinesia yang serupa dengan orang-orang kecil.

Teori-teori lain konon mengatakan bahwa "Orang Kecil" itu mungkin budak Afrika yang dibawa oleh para pedagang Eropa selama dasawarsa 1600an. Surat-surat dikirimkan oleh para pedagang Belanda yang mengunjungi Taiwan dalam dasawarsa 1600an menyebutkan keberadaan "orang pendek" di pulau.