یادگیری کارآموزی

در هوش مصنوعی، یادگیری کارآموزی (یا همان یادگیری از روش نمایش) فرایند یادگیری با مشاهده یک متخصص است. می‌توان آن را به‌عنوان نوعی از یادگیری تحت نظارت در نظر گرفت، که در آن مجموعه داده‌های آموزشی از اجرای وظایف توسط یک معلم نمایشی تشکیل است.

رویکرد تابع نگاشت 
توابع نگاشت با ایجاد یک نگاشت مستقیم از حالات به اقدامات، یا از حالت‌ها به مقادیر پاداش دهی، از متخصص تقلید می‌کنند. به عنوان مثال، در سال ۲۰۰۲، محققان از این رویکرد برای آموزش مهارت‌های ابتدایی فوتبال به ربات AIBO استفاده کردند.

رویکرد یادگیری تقویتی معکوس 
یادگیری تقویتی معکوس (Inverse reinforcement learning) یا به اختصار IRL فرایند به دست آوردن تابع پاداش از رفتار مشاهده شده می‌باشد. در حالی که «یادگیری تقویتی» معمولی از پاداش و تنبیه برای یادگیری رفتار استفاده می‌کند، IRL بالعکس عمل می‌کند و ربات رفتار یک فرد را مشاهده می‌کند تا دریابد که شخص با آن رفتار قصد دارد به چه هدفی برسد. از مشکلات و چالش‌های IRL می‌توان به این موارد اشاره کرد: 1) اندازه‌گیری رفتار یک عامل در طول زمان، در شرایط مختلف. ۲) اندازه‌گیری ورودی‌های سنسور آن عامل. ۳) مدلی از محیط فیزیکی (از جمله بدن عامل): تعیین تابع پاداشی که عامل در حال بهینه‌سازی آن است.محقق IRL، استوارت جی. راسل، می‌گوید ممکن است که IRL برای مشاهده انسان‌ها و تلاش برای کدگذاری «ارزش‌های اخلاقی» پیچیده آن‌ها، در تلاش برای ایجاد «ربات‌های اخلاق مدار» که ممکن است روزی متوجه باشند که «گربه خود را نپزند» بدون نیاز به اینکه صراحتاً برای آن‌ها توضیح داده شود استفاده شود. این سناریو را می‌توان به عنوان یک «بازی یادگیری تقویتی معکوس مشارکتی» مدلسازی کرد، که در آن یک بازیکن «انسان» و یک بازیکن «ربات» برای ایمن کردن اهداف ضمنی فرد با یکدیگر همکاری می‌کنند، با اینکه این اهداف مشخصا برای انسان و ربات شناخته نشده‌است.

در سال ۲۰۱۷، OpenAI و DeepMind برای یادگیری تقویتی معکوس مشارکتی در مسائل ساده مانند بازی‌های آتاری و کارهای ساده ربات مانند، همچون backflip از یادگیری عمیق استفاده کردند. نقش انسان به پاسخ دادن و بازتاب دادن به سؤالات ربات محدود می‌شد که کدام یک از دو سناریوی مختلف ترجیح داده می‌شود. محققان شواهدی پیدا کردند که نشان می‌دهد ممکن است این تکنیک‌ها از نظر اقتصادی برای سیستم‌های مدرن مقیاس‌پذیر باشند.

جستارهای وابسته 
 یادگیری تقویتی معکوس

منابع 

یادگیری ماشینی