Utfordringene med talesøk ligger i å forstå menneskets naturlige språk, som dialekter og toneleie. En annen utfordring med talesøk er å forstå hva personer mener med det som sies.