از نظر عملکردی مشابه اند ولی عملکردشون متفاوته
فایل robots.txt یک فایل متنی هست که برای کل سایت اعمال میشود و به گوگل میگوید کدام صفحات را خزش کند و کدام یک را خزش نکند
تگ meta robot یک تکه تگ است که اضافه میشود به تگ هد هر صفحه و به گوگل میگوید به چه شکل این صفحه را کرال و ایندکس بکند