تشخیص سه‌بعدی اشیاء کیست؟ توضیح بده.
در ، سه بعدی شامل تشخیص و تعیین اطلاعات سه بعدی، مانند ، حجم، یا شکل، یا انتخابی کاربر در یک عکس یا است. به‌طور معمول، نمونه‌ای از شیئی که باید شناسایی شود به یک سیستم بینایی در یک محیط کنترل‌شده ارائه می‌شود و سپس برای یک ورودی دلخواه مانند یک ، سیستم، شیء ارائه‌شده قبلی را مکان‌یابی می‌کند. این را می‌توان هم به صورت آفلاین یا هم در زمان انجام داد. حل این مشکل برای مکان‌یابی یک شی از پیش شناسایی شده، تخصصی هستند و می‌توانند با الگوریتم‌هایی که بر روی کلاس‌های کلی اشیاء کار می‌کنند، مانند یا تشخیص شی‌های عمومی سه بعدی، مقایسه شوند. با توجه به هزینه کم و سهولت گرفتن عکس، تحقیقات قابل توجهی به تشخیص اشیاء سه بعدی در عکس‌ها اختصاص یافته است.تشخیص سه بعدی یک شی در عکس‌ها.روش تشخیص یک شی سه بعدی به ویژگی‌های یک شی بستگی دارد. برای سادگی، بسیاری از الگوریتم‌های موجود بر روی تشخیص اجسام صلب متشکل از یک بخش متمرکز شده‌اند، یعنی اجسامی که تبدیل فضایی آنها یک است. دو روش کلی برای این مشکل در نظر گرفته شده است: روش‌های از اطلاعات ظاهری تصویر سطح پایین، برای مکان‌یابی یک شی استفاده می‌کنند، در حالی که روش‌های هندسی مبتنی بر ویژگی، مدلی را برای شیئی که باید شناسایی شود، می‌سازند و مدل را با آن مطابقت می‌دهند.روش‌های تشخیص الگو.این روش‌ها از اطلاعات ظاهری جمع‌آوری‌شده از پیش‌بینی‌های از پیش گرفته شده یا از پیش محاسبه شده یک شی استفاده می‌کنند تا با شی در صحنهٔ بالقوه به هم ریخته مطابقت داشته باشند. با این حال، آنها محدودیت‌های هندسی سه بعدی شی را در طول تطبیق در نظر نمی‌گیرند و همچنین معمولاً انسداد و رویکردهای مبتنی بر ویژگی را کنترل نمی‌کنند.روش‌های هندسی مبتنی بر ویژگی.روش‌های مبتنی بر ویژگی برای اشیایی که متمایزی دارند به خوبی کار می‌کنند. تاکنون، اشیایی که دارای ویژگی‌های لبه یا ویژگی‌های هستند با موفقیت شناسایی شده‌اند. برای مثال الگوریتم‌های تشخیص، به ترتیب به و مراجعه کنید. به دلیل عدم وجود خصیصه یاب‌های مناسب، اجسام بدون سطوح صاف و بافت دار در حال حاضر با این روش قابل کنترل نیستند.تشخیص‌دهنده‌های شی مبتنی بر ویژگی عموماً با از پیش گرفتن تعدادی نماهای ثابت از شی مورد شناسایی، استخراج ویژگی‌ها از این نماها و سپس در فرایند تشخیص، تطبیق این ویژگی‌ها با صحنه و اعمال محدودیت‌های هندسی کار می‌کنند.به عنوان مثال از یک سیستم نمونه اولیه که این روش را اتخاذ می‌کند، ما یک طرح کلی از روش استفاده شده توسط [Rothganger et al. 2004]، با برخی از جزئیات حذف شده ارائه خواهیم کرد. این روش با این فرض شروع می‌شود که اشیاء تحت دگرگونی‌های صلب جهانی قرار می‌گیرند؛ زیرا سطوح صاف به صورت موضعی مسطح هستند، ویژگی‌های ثابت پیوسته برای تطبیق مناسب هستند: مقاله مناطق بیضی شکل مورد نظر را با استفاده از ویژگی‌های لبه مانند و لکه مانند می‌دهد و طبق [Lowe 2004]، جهت گرادیان غالب بیضی را پیدا می‌کند، بیضی را به متوازی الاضلاع تبدیل می‌کند و یک توصیفگر (تبدیل ویژگی مقیاس‌نابسته) روی متوازی الاضلاع حاصل می‌گیرد. اطلاعات رنگ نیز فقط برای بهبود تمیز نسبت به ویژگی‌های SIFT استفاده می‌شود.در مرحله بعد، با توجه به تعدادی نماهای دوربین از شی (۲۴ در مقاله)، این روش یک مدل سه بعدی برای شی می‌سازد که شامل موقعیت مکانی و جهت‌گیری سه بعدی هر ویژگی است. از آنجایی که تعداد نماهای شی زیاد است، معمولاً هر ویژگی در چندین نمای مجاور وجود دارد. نقاط مرکزی چنین ویژگی‌های تطبیقی مطابقت دارند، و ویژگی‌های شناسایی شده در جهت گرادیان غالب تراز می‌شوند، بنابراین نقاط (۱، ۰) در سیستم ویژگی مختصات دکارتی متوازی الاضلاع نیز مطابق دارند مانند نقاط (۰، ۱) در سیستم مختصات دکارتی متوازی الاضلاع؛ بنابراین برای هر جفت ویژگی منطبق در نماهای نزدیک، مطابق جفت سه نقطه مشخص است. با توجه به حداقل دو ویژگی تطبیق، یک ساختار وابسته چند نما از الگوریتم (ببینید [Tomasi and Kanade 1992]) می‌تواند برای ساخت تخمینی از موقعیت نقاط (تا یک تبدیل دلخواه) استفاده شود؛ بنابراین مقاله Rothganger و همکاران دو نمای مجاور را انتخاب می‌کند، از یک روش مانند (اجماع نمونه تصادفی) برای انتخاب دو جفت ویژگی متناظر استفاده می‌کند، و ویژگی‌های جدیدی را به مدل جزئی ساخته‌شده توسط RANSAC تا زمانی که تحت یک عبارت خطا هستند، اضافه می‌کند؛ بنابراین برای هر جفت نمای مجاور معین، الگوریتم یک مدل جزئی از همه ویژگی‌های قابل مشاهده در هر دو نما ایجاد می‌کند.برای تولید یک مدل یکپارچه، مقاله بزرگ‌ترین مدل جزئی را می‌گیرد و به صورت تدریجی همه مدل‌های جزئی کوچکتر را با آن تراز می‌کند. کمینه سازی سراسری برای کاهش خطا استفاده می‌شود، سپس از ارتقای اقلیدسی برای تغییر موقعیت ویژگی‌های مدل از مختصات سه بعدی منحصر به فرد تا تبدیل وابسته به مختصات سه بعدی استفاده می‌شود که تا منحصر به فرد هستند. در پایان این مرحله، یک مدل از شی مورد نظر، متشکل از ویژگی‌هایی است که در یک فضای سه بعدی مشترک پیش‌بینی شده است.برای تشخیص یک شی در یک تصویر ورودی دلخواه، مقاله ویژگی‌ها را شناسایی می‌کند و سپس از برای یافتن ماتریس پیش‌نمایش وابسته استفاده می‌کند که بهترین تناسب را با مدل شی یکپارچه با فضای دوبعدی دارد. اگر این رویکرد RANSAC دارای خطای کافی کم باشد، سپس با موفقیت، الگوریتم هم شیء را تشخیص می‌دهد و هم وضعیت جسم را بر حسب یک پیش‌بینی نزدیک به آن می‌دهد. تحت شرایط مفروض، روش به‌طور معمول به نرخ تشخیص حدود ۹۵٪ دست می‌یابد.