موضوع مقاله: مشخصه عملیاتی کل | مخاطب: عمومی | لحن: دانشنامه‌ای | ساختار: عنوان، مقدمه، 3 بخش، جمع‌بندی | مقاله: | # مشخصه عملیاتی کل | مقدمه: مشخصه عملیاتی کل (TOC) یک روش آماری برای مقایسه یک متغیر بول در مقابل یک متغیر رتبه است. | ## بخش 1: مشخصه عملیاتی کل | TOC می‌تواند قدرت یک متغیر شاخص برای تشخیص وجود یا عدم وجود یک مشخصه را اندازه‌گیری کند. تشخیص وجود یا عدم وجود بستگی به این دارد که آیا مقدار شاخص بالاتر از یک محدوده باشد. هر محدوده یک جدول احتمالی دو به دو ایجاد می‌کند که شامل چهار ورودی است: ضربه‌ها، اشتباهات، هشدارهای نادرست و مردودی‌های صحیح. برای هر محدوده، ROC دو نسبت را نشان می‌دهد، ضربه‌ها/(ضربه‌ها + اشتباهات‌) و هشدارهای نادرست/(هشدارهای نادرست + مردودی‌های صحیح)، در حالی که TOC کل اطلاعات را در جدول احتمالی برای هر محدوده نشان می‌دهد. روش TOC همه‌ی اطلاعاتی را که روش ROC ارائه می‌دهد، علاوه بر اطلاعات مهم دیگری که ROC فاش نمی‌کند، نشان می‌دهد، یعنی اندازه هر ورودی در جدول احتمالی برای هر یک. TOC برای اندازه‌گیری قدرت تشخیصی در بسیاری از زمینه‌ها از جمله (اما نه محدود به): علم تغییر زمین، تصویربرداری پزشکی، پیش‌بینی آب و هوا، سنجش از دور و آزمایش مواد، قابل استفاده است. مفهوم اولیه روش ساخت منحنی TOC با تشخیص هر مشاهده به عنوان وجود یا عدم وجود، بسته به نحوه ارتباط شاخص با محدوده‌های متفاوت، متغیر بول را با متغیر شاخص مقایسه می‌کند. اگر شاخص مشاهده بزرگتر یا مساوی یک محدوده باشد، مشاهده به عنوان وجود تشخیص داده می‌شود، در غیر این صورت مشاهده به عنوان عدم وجود تشخیص داده می‌شود. جدول اقتضایی که از مقایسه بین متغیر بول و تشخیص برای یک محدوده منزوی حاصل می‌شود، دارای چهار ورودی مرکزی است. چهار ورودی مرکزی عبارتند از: ضربه (H)، اشتباهات (M)، هشدار نادرست (F) و مردودی صحیح (C). اصطلاحات "مثبت‌های واقعی"، "منفی‌های کاذب"، "مثبت‌های کاذب" و "منفی‌های واقعی" به ترتیب معادل ضربه‌ها، اشتباهات‌، هشدارهای نادرست و مردودی‌های صحیح هستند. ورودی‌ها را می‌توان در یک جدول احتمالی دو به دو یا ماتریس سردرگمی‌ به صورت زیر فرموله کرد: تشخیص‌ها بولحضورغیببول کلحضورHMH + M = PغیبFCF + C = Qکل تشخیص‌هاH + FM + CP + Q چهار بیت اطلاعات همه ورودی‌های جدول احتمالی، از جمله مجموع نهایی آن را تعیین می‌کنند. به عنوان مثال، اگر H، M، F و C را بدانیم، آنگاه می‌توانیم همه‌ی خروجی‌های نهایی را برای هر محدوده محاسبه کنیم. از طرف دیگر، اگر H / P، F / Q، P و Q را بدانیم، می‌توانیم همه‌ی ورودی‌های جدول را محاسبه کنیم. به عنوان مثال، اگر فقط H / P و F / Q را بدانیم (چیزی که ROC نشان می‌دهد) آنگاه نمی‌توان همه ورودی‌های جدول را دانست. | ## بخش 2: مشخصه عملیاتی کل | منحنی TOC یک روش موثر برای نشان دادن کل اطلاعات در جدول احتمالی برای همه محدوده‌ها است. این مجموعه داده دارای 30 مشاهده است که هر کدام از مقادیر یک متغیر بول و یک متغیر شاخص تشکیل شده است. 31 محدوده وجود دارد که شامل 30 مقدار شاخص و یک محدوده اضافی است که بزرگتر از همه مقادیر شاخص است که نقطه را در مبدا ایجاد می‌کند (0,0). محور عمودی از 0 تا 10 متغیر است، که تعداد مشاهدات حضوری متغیر بول P است (یعنی ضربه‌های ++ اشتباه). منحنی‌های TOC همچنین محدوده‌ای را نشان می‌دهند که در آن مقدار وجود تشخیص داده شده با مقدار وجود بول مطابقت دارد، که نقطه محدوده‌ای است که مستقیماً زیر نقطه‌ای است که حداکثر خط با ضربه‌ها برخورد می‌کند + خط را از دست می‌دهد، همانگونه که منحنی TOC در سمت چپ نشان می‌دهد. چهار قطعه اطلاعات زیر، ورودی‌های اصلی جدول احتمالی برای هر محدوده هستند: تعداد ضربه‌ها در هر محدوده فاصله بین نقطه محدوده و محور افقی است. تعداد خطاها در هر محدوده، فاصله بین نقطه محدوده و ضربه‌ها + خط افقی در بالای نمودار است. تعداد هشدارهای نادرست در هر محدوده، فاصله بین نقطه محدوده و خط آبی بیشینه است که سمت چپ فضای TOC را محدود می‌کند. تعداد دفعات صحیح در هر محدوده، فاصله بین نقطه محدوده و کمینه خط بنفش نقطه چین است که سمت راست فضای TOC را محدود می‌کند. منحنی TOC تعداد ضربه‌ها را نشان می‌دهد که 3 است، و از این رو تعداد خطاها را نشان می‌دهد که 7 است. علاوه بر این، منحنی TOC نشان می‌دهد که تعداد هشدارهای نادرست 4 است و تعداد مردودی‌ها صحیح 16 است. در هر نقطه معینی از منحنی ROC، می‌توان مقادیری را برای نسبت‌های نادرست جمع آوری کرد. با این حال، این دو مقدار برای ساختن همه ورودی‌های جدول احتمالی دو به دو، بسنده نیستند. این منحنی TOC نمونه‌ای را نشان می‌دهد که در آن متغیر شاخص دارای قدرت تشخیص تصادفی در محدوده‌های بالا و قدرت تشخیص بالا در محدوده‌های پایین است. منحنی از خط تصادفی در بالاترین محدوده‌های نزدیک به مبدأ پیروی می‌کند، در ادامه متغیر شاخص به درستی عدم وجود را تشخیص می‌دهد زیرا محدوده‌ها در نزدیکی گوشه سمت راست بالا کاهش می‌یابد. | ## بخش 3: مشخصه عملیاتی کل | AUC این احتمال را نشان می‌دهد که تشخیص یک مشاهده تصادفی انتخاب شده از وجود بول را بالاتر از یک مشاهده تصادفی انتخاب شده از نبود بول قرار می‌دهد. با این حال، AUC به عنوان یک معیار گمراه کننده، به ویژه برای تحلیل‌های واضح فضایی، مورد انتقاد قرار گرفته است. همچنین انتخاب ناحیه فضایی به شدت بر میزان غیبت‌های تشخیص داده شده دقیق و نمرات AUC تأثیر می‌گذارد. در زمان استفاده از واحدهای نرمال شده، سطح زیر منحنی (اغلب به عنوان AUC نامیده می‌شود) برابر با احتمال این است که طبقه بندی کننده یک نمونه مثبت انتخاب شده را بالاتر از یک نمونه منفی تصادفی انتخاب کند (با فرض اینکه رتبه "مثبت" بالاتر از "منفی" باشد). این را می‌توان به صورت زیر مشاهده کرد: (مساحت زیر منحنی با (مرزهای انتگرال معکوس می‌شوند) چون T بزرگ مقدار کمتری در محور x دارد) چپ|بی‌قاب|172x172پیکسل چپ|بی‌قاب|166x166پیکسل چپ|بی‌قاب|956x956پیکسل که در آن X1 نمره برای یک مثال مثبت و X0 نمره برای یک مثال منفی است، و f1 و f0 چگالی احتمال هستند؛ همانگونه که در بخش قبل تعریف شده بود. AUC با ضریب جینی (G1) با فرمول G1=2AUC-1 مرتبط است که در آن: چپ|بی‌قاب|280x280پیکسل به این ترتیب می‌توان AUC را با استفاده از میانگین تعدادی تقریب ذوزنقه ای محاسبه کرد. همچنین رایج است که مساحت زیر ناحیه محدب TOC را محاسبه کنیم (ROC AUCH = ROCH AUC) زیرا هر نقطه از پاره خط بین دو نتیجه پیش‌بینی را می‌توان با استفاده از یک یا چند سیستم دیگر با احتمالات متناسب با طول نسبی بدست آورد. همچنین امکان معکوس کردن تقعرها وجود دارد - همانگونه که در شکل می‌توان راه حل بدتر را برای تبدیل شدن به یک راه حل بهتر منعکس کرد. در حالی که TOC AUC بین 0 و 1 متغیر است - با یک طبقه‌بندی کننده غیر اطلاعاتی که 0.5 را به دست می‌دهد - معیارهای جایگزین شناخته شده به عنوان آگاهی، قطعیت و ضریب جینی (در پارامترسازی واحد یا مورد سیستم منزوی) همه این مزیت را دارند که 0 نشان دهنده عملکرد شانسی است در حالی که 1 نشان دهنده عملکرد کامل است، و -1 نشان دهنده حالت "منحرف" آگاهی کامل است که همیشه پاسخ اشتباه می‌دهد. شانس آوردن عملکرد به 0 اجازه می‌دهد تا این مقیاس‌های جایگزین به عنوان آمار کاپا تفسیر شوند. نشان داده شده است که آگاهی در مقایسه با سایر تعاریف رایج کاپا مانند کاپا کوهن و فلیس کاپا، ویژگی‌های مطلوبی برای یادگیری ماشین دارد. گاهی اوقات نگاه کردن به ناحیه خاصی از منحنی TOC به جای کل منحنی می‌تواند مفیدتر باشد. برای مثال، می‌توان روی ناحیه منحنی با نرخ مثبت کاذب پایین تمرکز کرد که اغلب برای آزمایش‌های غربالگری جمعیت مورد توجه قرار می‌گیرد. | ## جمع‌بندی | یکی دیگر از رویکمردودی‌های رایج برای مسائل طبقه بندی که در آن P ≤ N (متداول در کار مردودی‌های بیوانفورماتیک) استفاده از یک مقیاس لگاریتمی‌ برای محور x است.