hotchpotch/wikipedia-multilingual-ir-pairs huggingface dataset:
تلويح بالفضيلة استخدامها في الازدراء
في منتصف العام 2010، انتشر مصطلح التلويح بالفضيلة بين مستخدمي الإنترنت ووسائل التواصل الاجتماعي كأسلوب ازدراء، حيث استنكروا بعض أفعال الالتزام الشعبي بأشياء جيدة لا تقبل النقاش مثل تغيير صورة حساب الفيسبوك تضامنا مع قضية ما، المشاركة في تحدي دلو الثلج، نشر الأفكار والأدعية عقب وقوع مأساة، خطابات المشاهير أثناء تلقي الجوائز، وتملق السياسيين للناخبين على أسس أيديولوجية.
يقول المعجمي أورين هارغريفز أن المصطلح ينبع من وسائل التواصل الاجتماعي، مما يزيل الحواجز أمام بث العواطف. ويربط أورين المصطلح بفئة المصطلحات الجديد الخاصة بـ «الخزي»، كخزي الصلوات مثلا، والذي قد يكون له معنى معاكسا للتلويح بالفضيلة. كما تصف المحررة بشركة ميريام وبستر إيميلي بريوستر المصطلح بأنه نظير شبه أكاديمي لمصطلح «التفاخر المتواضع» الذي صاغه هاريس ويتلس عام 2010.
في 22 يونيو 2014، نشر تعليق على مقالة بمدونة بي جي ميديا واستخدم فيه مصطلح «التلويح بالفضيلة» لوصف عدة مقالات تنتقد قطعة كتبها جورج ويل حول ردود فعل الحكومة الفيديرالية الأمريكية على ادعاءات الاغتصاب في الجامعات.
تلويح بالفضيلة استخدامها في الازدراء
أخطأت جريدة بوستون غلوب حينما ذكرت في أحد مقالاتها أن استخدام المصطلح يعود إلى عام 2004.
في أبريل 2015، استخدم الكاتب البريطاني جيمس بارثولوميو في جريدة سبكيتيتور التلويح بالفضيلة ليصف التعبيرات الشعبية الفارغة التي يقصد بها اتخاذ موقف مقبول اجتماعيا دون التعرض لأي مخاطرة أو القيام بأي تضحية. وقد خص جيمس إعلانا بسوق هول فودز بالنقد، حيث كان الإعلان مكونا من صورة لأم تحمل طفلها فوق كتفها، وكتب على الصورة: «القيم تهمنا.... إننا نملك جزء من الوعي المتنامي الذي يتخطى أهمية الطعام –وعي يدافع عن ما هو جيد». فعلق قائلا: «هذا مثال جلي على ظاهرة التلويح بالفضيلة، التي باتت في انتشار متزايد، وتستخدم لتدل على أنك رحيم، لطيف، وشريف». كما أشار جيمس بالمصطلح إلى العديد من الشخصيات الإعلامية، الأكاديمية، والسياسية. يقول جيمس أن التلويح بالفضيلة يمكن أن يكون إعلانا عن التضامن، أو الكراهية تجاه أمور سلبية، وذلك كوسيلة لإخفاء النوايا الذاتية المتضخمة. وفي مقال لاحق، ادعى جيمس زورا أنه اخترع المصطلح، وقد عارضته جريدة الغارديان وبوستون غلوب في ذلك، إلا أن الجريدتان اعترفتا بأن الفضل يرجع إليه في نشر وشهرة المصطلح.
تلويح بالفضيلة تعليقات
يرى سام بومان، المدير التنفيذي لمعهد آدم سميث، أن معنى المصطلح كما نشره جيمس بارثولوميو يسيء استخدام مفهوم التلويح ويشجع على التفكير البطيء. وفي الغارديان، اقترحت زوي ويليامس أن العبارة ازدراء مكمل لمصطلح «شمبانيا اشتراكية»، بينما يقول الزميل بالغارديان ديفيد شارياتماداري أنه بينما يخدم المصطلح هدفا ما، فإن استخدامه المتزايد كهجوم شخصنة أثناء المناظرات السياسية جعل المصطلح مجرد تعبير طنان سياسي فارغ.
تلوم هيلين لويس، التي تكتب لدى نيو ستاتسمان، التلويح بالفضيلة على هزيمة حزب العمل في انتخابات 2015 العامة، وقالت أن الرغبة في الظهور بآراء أخلاقية قادت النشطاء السياسيين إلى التركيز على قضايا مثل نزع السلاح النووي، والتي تعد قضايا بعيدة عن بال الناخب العادي، مما أدى إلى حدوث تأثير تضخيم أدى إلى تقليل استراتيجي حزب العمل من شأن التأييد الذي تأخذه السياسات المحافظة.
كونغ فو شاولين
كونغ فو شاولين ويسمى أيضا الوو شو شاولين (Shàolín wǔshù) أو شاولين تشيوان (Shàolín quán) هي واحدة من أقدم وأكبر الأساليب القتالية الأكثر شهرة في الكونغ فو تجمع بين بوذية تشان وفنون الدفاع عن النفس.
نشأ وتطورت هذه الرياضة في معبد شاولين في مقاطعة خنان بالصين خلال تاريخه الممتد على مدار 1500 عام. في أمثال الفولكلور الصيني الشعبي تتعلق هذه الممارسة «بأن جميع فنون الدفاع عن النفس تحت السماء قد نشأت من شاولين» و «كونغ فو شاولين هو الأفضل تحت السماء»، لإبراز تأثير كونغ فو شاولين على فنون الدفاع عن النفس.
يستخدم اسم شاولين كعلامة تجارية لأنماط خارجية تسمى الكونغ فو. كما تستخدم العديد من الأساليب في جنوب الصين وشمالها اسم شاولين.
كونغ فو شاولين تاريخ
يذكر أيضا أن رهبان دير شاولين شاركو في القتال خلال عام 610، لكن لا يشير ذلك إلى وجود نمط خاص بالدير.
وفقا للتقاليد، قام الراهب البوذي بودهيدهارما إبان القرن الخامس بتدريس كونغ فو شاولين إلى رهبان معبد شاولين، لمساعدتهم على الدفاع عن أنفسهم من الحيوانات وقطاع الطرق الذين يجوبون حول الدير. لكن الباحثون الأكاديميون انتقدوا هذه الفرضية في وقت مبكر من القرن الثامن عشر، في حين تابع بعض المؤرخين هذه الأسطورة إلى القرن السابع عشر.
وبالرغم من ذلك اعتبر الراهب البوذي بودهايدهارما هو مبتكر فنون الشاولين القتالية. يأتي هذا الإسناد من فيلسوف طاوي الذي كتب المخطوطة ودليل الاستعمال Yijinjing في عام 1624 زاعما أنه اكتشفه. تتتبع أول مقدمات هذا الدليل تعاقب نمط تشي كونغ من بودهايدهارما إلى الجنرال لي جينغ، من خلال سلسلة من القديسين وأبطال الحرب البوذيين. ويرى الباحثون أن هذا العمل هو عمل مزيف بسبب وجود العديد من المفارقات التاريخية بالإضافة إلى وجود شخصيات خيالية من الأدب الصيني تم سردها على أنها سادة حسب. وقد وصف لينغ تينكانغ (1757-1809) وهو باحث من أسرة تشينغ هذا المؤلف بالفعل بأنه «سيد قرية جاهل».
كونغ فو شاولين تداريب الدير
يتم اختيار تلاميذ الدير عمومًا من أفضل الصبيان الطلاب في مدارس القتال في المنطقة أو بقية الصين. عادة ما يستمر التدريب العسكري للتلاميذ بين سنتين إلى أربع سنوات، عدة ساعات في اليوم. في نهاية هذه الفترة، يمكن أن يصبحوا رهبانا. لا يدرس جميع الرهبان البوذية (zen)، ولا معظم الممارسات التقليدية (متل التأمل، تشي كونغ، التقنيات الأصيلة للدفاع عن النفس). ويركز معظم الرهبان على الحركات البهلوانية وتدريبات التصادم لإرضاء المجموعات السياحية. في حين يلتحق الرهبان القتاليون الأكثر موهبة إلى العروض والجولات السياحية العالمية لبضع سنوات.
حاتم بالرابح
حاتم بالرابح هو ممثل ومسرحي تونسي اشتهر بدوره في المسلسل التونسي الخطاب عالباب، بالإضافة إلى المشاركة في العديد من المسلسلات التونسية وبعض الأفلام السينمائية التونسية كما له عدد من الأعمال المسرحية وكان قد سافر لليونان واشتغل أستاذ مسرح لكنه تعرض إلى حادث مرور خطير جعله يعود للعلاج في تونس.
معدل خطأ بايز
في التصنيف الإحصائي، فإن معدل خطأ بايز هو أدنى معدل خطأ ممكن لأي مصنِّف لإعطاء نتيجة عشوائية (على سبيل المثال، التصنيف إلى واحدة من فئتين). وهو مماثل للخطأ غير القابل للاختزال.
يوجد عدد من الطرق لتقدير معدل خطأ بايز. إحدى الطرق تقوم على الحصول على مجموعات تحليلة تعتمد في تشكيلها على متغيرات التوزيع، وبالتالي يصعب تقديرها. ويركز نهج آخر على الكثافة كل صنف، في حين تجمع طريقة أخرى بين المصنفات المختلفة وتقارن بينها.
ويعتبر معدل خطأ بايز ذا أهمية كبيرة في دراسة الأنماط والتعلم الآلي.
معدل خطأ بايز تقدير الخطأ
من حيث التعلم الآلي وتصنيف الأنماط، يمكن تقسيم التسميات الخاصة بمجموعة من الملاحظات العشوائية إلى فئتين أو أكثر. تسمى كل ملاحظة (instance) والفئة التي تنتمي إليها هي (label). معدل خطأ بايز لتوزيع البيانات هو احتمال أن يتم تصنيف الحالة بشكل خاطئ بواسطة مصنف يعرف احتمال الفئة الصحيحة. بالنسبة لمصنف متعدد الفئات، قد يتم حساب معدل خطأ بيزعلى النحو التالي:[بحاجة لمصدر]
حيث x هو تمثل الحالة، Ci هي فئة يالحالة، Hi هي المنطقة التي تُصنف كـ Ci بواسطة دالة التصنيف.[بحاجة لتوضيح]
يعتبر خطأ بايز غير صفري إذا كانت فئات التصنيف غير حتمية، أي أن هناك احتمالًا غير صفري لحقيقة معينة تنتمي لأكثر من فئة واحدة.[بحاجة لمصدر]
سفر برلك (نفير عام 1914)
سفر برلك (بالتركية:Seferberlik) وتعني: النفير العام. وهو فرمان أصدره السلطان العثماني محمد رشاد بتاريخ الثالث من آب/أغسطس 1914م، وكان الفرمان يعد كل شخص من مواليد ما بين (1869 ـ 1882) في أراضي الدولة العثمانية من المسلمين وغير المسلمين، مطلوباً للخدمة العسكرية، ويجب عليهم الالتحاق بشعب تجنيدهم من تلقاء أنفسهم دون انتظارهم التبليغات. ويحق للمواطنين العثمانيين غير المسلمين دفع (30 ليرة ذهبية) بدلاً، مقابل الإعفاء من الخدمة العسكرية. فهو دعوة إلى الرجال الذين بلغت أعمارهم بين (15 حتى 45) سنة من رعايا الدولة العثمانية، ومن بينهم رعايا البلاد العربية إلى الإلتحاق بالخدمة العسكرية الإجبارية. وأطلق البغداديون عليها أيام الضيم والهلاك.
سفر برلك (نفير عام 1914) أهل الأعظمية
بعد اعلان النفير العام انطلقت الناس تحمل الرايات ومعها فرقة الدمام والدفوف، بالتكبير والتهليل، وقد وجه الحاج نعمان الأعظمي والسيد عبد الباقي متولي الحضرة الأعظمية، بتوجيه الدعوة الى علماء النجف والكاظمية لزيارة الأعظمية. وفي عصر يوم الجمعة 1915/12/3 قدم وفد علماء النجف والكاظمية  فاستقبلهم علماء الأعظمية، ووجوهها، وكانت مع الوفد النجفي (الراية الحيدرية)، فاثارت حماس الناس الى الجهاد.وتلا الشيخ محمد جواد الجواهري دعاء، واقيم بعدها احتفال في صحن الجامع تلا فيه معروف البشدري، مدرس الحضرة الاعظمية دعاء آخر  ثم القى العلامة الحاج نعمان الاعظمي خطبة في اتحاد كلمة المسلمين، وكان لهذه الزيارة وقع حسن واثر طيب.
وبعدها سيق ابناء المدن والقصبات العراقية إلى ميادين القتال. وخلت الأعظمية من الشباب والرجال، ولم يبق فيها سوى النساء والشيوخ والاطفال، وأهل الأعذار، وقد سيق أبناء الأعظمية، إلى جبهة روسيا، فأهلكتهم الثلوج وماتوا من شدة البرد والجوع، وبعد انتهاء الحرب عاد قسم منهم إلى الأعظمية، وبعضهم قد سقطت أصابع يده او رجله في الثلوج.
سفر برلك (نفير عام 1914) أهل الأعظمية
وقد فقدت الاعظمية اكثر من مئة واربعين شهيداً، وهو عدد كبير بالنسبة لصغر بلدة الأعظمية، وقلة نفوسها في ذلك العهد.
سفر برلك (نفير عام 1914) شاهد عيان
ذكر محمد رؤوف السعودي البغدادي في مذكراته: انه في سنة 1914م، أعلنت الحرب العالمية الأولى ودخلتها الدولة العثمانية بجانب ألمانيا ضد الحلفاء وجردت لها حملة عسكرية قوامها عشرون ألف جندياً مقاتل من لواء بغداد وقضاء الكاظمية وقضاء سامراء وبعض الأقضية التابعة لبغداد والأقضية التابعة إلى لواء ديالى. وسفرتهم إلى شمالي شرقي تركيا، وعلى سفوح جبال القفقاس المتاخمة لتركيا، لمجابهة القوات الروسية المهاجمة على حدود تركيا وحدودنا الشمالية في مناطق الأكراد. فصادف ان تساقطت الثلوج بكثرة هائلة على جبال القفقاس، واشتد البرد وإنهالت القطع الكبيرة من الثلوج على مخيمات الجنود العراقيين اللذين لم يألفوا برد الطبيعة وثلوجها، فدفنتهم تحت هذا الركام من الثلج، فماتوا إلا قليلاً، وهذا القليل الذي نجا من الموت وفر من هول الكارثة فقد وقع أسيراً في قبضة الجيش الروسي. وعلى أثر ذلك تجمدت بحيرة وان، وصدرت أوامر أحد القادة الأتراك -وتحت إمرته كثير من الجنود العراقيين- إلى قطعات جيشه بالمسير فوق البحيرة المتجمدة ظناً منه انها تحملهم وعتادهم وخيولهم، لانها متجلدة صلبة، فما إجتازوا وأوغلوا في منتصفها إلا وانفرجت وغاص الجيش تحتها، بمافيه من رجال وسلاح ومؤن وخيول، قد غمرتهم مياه البحيرة غرقاً. والذين لا يزالون يسيرون خلفهم على أرض متجمدة تماماً، لما شاهدوا ما حل بإخوانهم من الغرق والدمار أخذهم هول المصيبة وسادهم الفزع والخوف والهلع، فهاموا على وجوههم تيهاً في تلك الٱكام والجبال والثلوج، فماتوا من شدة البرد والجوع والتعب، وتفشت الأوبئة المختلفة بالبقية الباقية من الجيش، ولم ينج من تلك الحملة والتي يقدر عددها بعشرين ألف جندي إلا المائة أو المائتين منهم على أكثر تقدير. وتوالت أخبار هذه النكبة على بغداد الثكلى فجعلت في كل بيت من بيوتها مناحة وعزاء، وجزع نسائها على أبنائها، فلطمن الخدود، وشققن الجيوب، ونثرن الشعور، وأكتست بغداد ثوب الحزن، وظلت هذه الفاجعة ذكرى مؤلمة ترويها الأجيال بعد الأجيال.
سفر برلك (نفير عام 1914) شاهد عيان
ويذكر مؤلف كتاب مندلي عبر العصور مايلي: أعلنت الدولة العلية العثمانية النفير العام على هيأة الحياد المسلح في 28 تموز سنة 1914م الموافق 1332هجرية. وأعلنت روسيا الحرب على تركيا في 2 تشرين الثاني 1914م، وإنكلترا أعلنت الحرب عليها في 5 تشرين الثاني 1914م. وكان اعلان التعبئة العامة هو بمثابة استعداد الدولة العثمانية للوقوف إلى جانب المانيا في الحرب العالمية الأولى. حيث قام الجيش العثماني بوضع ملصقات الإعلانات على مداخل البنايات الحكومية، والمقاهي والاسواق والمحلات وغيرها من الاماكن العامة، التي تعلن النفير العام. استفاقت مدن العراق كغيرها من المدن العربية، صبيحة الثالث عشر من شهر رمضان سنة 1914م، على انتشار إعلانات النفير العام، ملصقة في كل مكان، اطلع أبناء بغداد على تلك الإعلانات التي عُلقت أمام المباني الحكومية في السراي، ومدخل القشلة، وعلى أبواب المقاهي والمحلات. ومن أشكال تلك الإعلانات واحداً فيه صورة بندقيتين متقاطعتين بهذا الشكل X، وكتب تحتها باللغة التركية:(سفر برلك وار سلاح باش له اولانلر) وتعني:(هناك نفير عام كونوا على استعداد مع أسلحتكم).وسبب تسمية البغداديين للسفر برلك بأيام الضيم والهلاك، وذلك لقيام الجيش العثماني بنقل الآلاف من شباب العراق كجنود مقاتلين، وسيروهم إلى جبهة القفقاس، حيث هلكوا جوعاً وبرداً، ولم يعد منهم سوى نفر يعدون على الأصابع، وفي حرب القفقاس هذه استشهد فيها ما لا يقل عن ثمانين بالمئة من الجنود العراقيين.
سفر برلك (نفير عام 1914) شاهد عيان
ويذكر الدكتور علي الوردي، انه في صباح 3 آب 1914م، فوجيء العراقيون بالطبول تدق على غير العادة، وشاهدوا على الجدران إعلانات رسم عليها مدفع وبندقية وكتب تحتها عبارة تركية (سفر برلك وار _ عسكر اولانلر سلاح باشنة)، ومعناها ان النفير العام قد أعلن وعلى الجنود ان يكونوا على أهبة الاستعداد باسلحتهم. كان القصد من هذا الإعلان البدء بالتعبئة العامة دون الاشتراك بالحرب. اذ ان تركيا لم تدخل الحرب إلا بعد ثلاثة أشهر. ولكن عامة الناس لم يميزوا بين اعلان النفير وبين دخول الحرب فساد الوجوم على الكثير منهم وأعتبروه بلاء أنزله الله عليهم كما ينزل الطاعون عقاباً لهم على ذنوبهم. وعلى اية حال كانت القوات التركية الموجودة في العراق في حالة مزرية.
سفر برلك (نفير عام 1914) شاهد عيان
وهذا الحال المزري والمفجع ينطبق على مصر ومنها ماعرف بحملة ترعة السويس الأولى، والثانية التي سميت معركة رمانة، ونفس الأوضاع واجهها أهالي فلسطين وكذلك أهالي سورية، وقد جسدت معاناتهم في تلك الحقبة من خلال المسلسل التلفزيوني إخوة التراب ومثلهم في لبنان الذين نقلوا معاناة تلك الأيام الصعبة في فيلم سفر برلك من بطولة الفنانة فيروز، الذي صور معاناة الأهالي والشباب من أعمال سخرة وتهجير، وحتى أهالي المدينة المنورة لم يكونوا إلا أسوأ حالاً ممن سبق ذكره.
وللشاعر البغدادي ملا عبود الكرخي قصائد معارضة وباللهجة البغدادية تتناول إبتلاء العراقيين بفرمان السفر برلك لما تسبب في هلاك الشباب من أبناء العراق، ومن هذه القصائد:
ذا سترانج وانس
ذو سترانج وانس هو فيلم دراما أمريكي صدر في 2017,  من إخراج كريستوفر رادكليف ولورين وولكستين وكتابة  كريستوفر رادكليف.  الفيلم  من بطولة اليكس بيتيفر، جيمس فريدسون-جاكسون، إيميلي آلثاوس, جين جونز, كامبل أوين، توبايس كامبل، وعرض في دايركت تي في بتاريخ 7 ديسمبر 2017 ، قبل أن يصدر على صيغة فيديو حسب الطلب و في دور العرض يوم 5 يناير 2018 ، عن طريق فيرتيكال إنترتاينمنت.
ذا سترانج وانس الإصدار
حظي الفيلم بعرضه الأول في ساوث باي ساوث واست بتاريخ 11 مارس 2017. في 20 مايو عام 2017 ، حصلت فيرتيكال إنترتاينمنت و دايركت تي في على حقوق توزيع الفيلم. صدر الفيلم على قناة دايركت في 7 ديسمبر عام 2017 ، قبل أن يصدر في صيغة  الفيديو حسب الطلب وفي دور العرض يوم 5 يناير 2018 ، عن طريق شركة فيرتيكال إنترتاينمنت للتوزيع.
في موقع الطماطم الفاسدة, حصل الفيلم على تأييد بنسبة  58% بناء على 24 مراجعة، بمتوسط  تصنيف بلغ 5.5/10. أما على موقع ميتاكريتيك, حصد الفيلم متوسط 57 درجة من أصل 100 ، على أساس 10 نقاد، مشيرا إلى «متوسط».
بياتريس دي إستي، ملكة المجر
بياتريس دي إستي (بالمجرية: Estei Beatrix)‏ (1215 - قبل. 8 مايو 1245)؛ كانت ملكة المجر القرينة بكونها الزوجة الثالثة والأخيرة لأندراس الثاني.
كانت بياتريس الابنة الوحيدة لـ ألدوبراندينو الأول دي إستي ولكن اسم وأصل والدتها غير معروف، منذ وفاة والدها في نفس سنة ولادتها، انتقلت رعايتها إلى عمها الماركيز أزو السابع دي إستي.
في أوائل عام 1234 زار الملك المسن أندراس الثاني ملك المجر الذي كان أرملاً للمرة الثانية في 1233، بلاط عائلة إستي، وسقط في حب الشابة بياتريس، اعطى عمها الموافقة على الزواج بشرط تنازل كل من بياتريس وأندراس عن المهر وأي مطالبة بالميراث والدها.
تم الاحتفال بزواجهما في سيكشفهيرفار، ووعد الملك أثناء عقد الزواج بأن تحصل بياتريس على 5000 جنيه، وأيضا ستحصل على 100 جنيه كإيرادات سنوية، ومع ذلك سرعان ما أصبحت العلاقة بينها وبين أبنائه متوترة.
بياتريس دي إستي، ملكة المجر
وبعد وفاة زوجها في 21 سبتمبر 1235 وصعود ابن زوجها الملك بيلا الرابع أراد ابعاد بياتريس عن المجر، ولكن مع إعلان بياتريس بأنها حامل بعد وفاة زوجها، اتهمها بارتكاب الزنا وأمر باعتقالها، ومع ذلك استطاعت الهروب المجر بمساعدة أحد سفراء فريدرش الثاني إمبراطور روماني مقدس التي أوصلت جنازة زوجها المتوفي إلى المجر من الأراضي المقدسة.
ذهبت بياتريس إلى الإمبراطورية الرومانية المقدسة واستطعت انجاب ابنها إستفان الذي لم يثبت شرعيته من قبل أخوته الكبار، بعد ولادتها أرادت بياتريس الرجوع إلى بلاط إستي، ومع ذلك رفض عمها الطلب هو الأخر.
أمضت بياتريس السنوات التالية في تتجول بإيطاليا، ولم تتخلى عن إدعاءات لابنها للحصول على إيراداته من المجر باعتباره أمير، بحيث استطاع إقناع جمهورية البندقية بدعم ابنها عندما كانت في حالة حرب مع المجر، ومع ذلك البندقية وعدت الملك بيلا الرابع أثناء الصلح بينهما 30 يونيو 1244 بأنها لن تدعم بياتريس وابنها أبداً.
منح البابا إنوسنت الرابع إيراداتها من 35 ديراً في إيطاليا لها، لاحقاً في 1290 مع وفاة حفيد الملك بيلا الرابع لازلو الرابع دون وريث، انتخب النبلاء المجريون حفيدها أندراس الثالث للصعود إلى العرش باعتباره الذكر الوحيد في السلالة الحاكمة.
معالجة مسبقة للبيانات
المعالجة المسبقة للبيانات (بالإنجليزية: Data preprocessing) هي مصطلح يشير إلى مرحلة تسبق تحليل البيانات، بهدف تحسين قدرات التحليل والاستدلال من هذه البيانات، وذلك عن طريق تهيئة أجزاء معينة من معلومات البيانات وإزالة أجزاء غير ضرورية أو زيادتها، قبل الشروع في تحليل هذه البيانات واستخدامها في أي عملية، وغالبًا ما تُعد خطوة مهمة في عملية التنقيب عن البيانات (بالإنجليزية: Data mining). ونظرًا لأن طرق جمع البيانات تكون في كثير من الأحيان غير مُحكَمة بدرجة كافية مما يؤدي إلى وجود قيم خارج النطاق كأن يكون رقم التليفون بالسالب أو به كسور عشرية وعلى نحو مماثل في تسجيلات تخطيط كهربية الدماغ التي تحاول مراقبة نشاط الدماغ بأن تكون الإشارات المُدخلة لا تنشأ من القشرة المخية ولكن من عضلات فروة الرأس، أو تراكيب بيانات غير منطقية مثل أن يكون الجنس ذكراً والبيان أنه حامل، أو بيانات مفقودة وغيرها من المشكلات التي قد تؤدي إلى نتائج مضللة وغير منطقية عند التحليل، فلذلك يتم في مرحلة المعالجة المسبقة للبيانات تحويل البيانات غير المُهيكلة إلى تمثيلات مناسبة تصلح للاستخدام في نماذج تعلم الآلة (بالإنجليزية: Machine learning)، فيتم التعامل مع "الضجيج" الموجود في البيانات وإزالته بأنسب الطرق المقبولة بهدف الوصول إلى نتائج أفضل وأكثر دقة مقارنةً بالبيانات الأصلية المليئة بالتشويش.
معالجة مسبقة للبيانات
إن تحليل البيانات قبل تحديد مثل هذه المشاكل، أو دون دراسة مناسبة لتلك المشاكل قبل التحليل، قد يؤدي إلى استنتاجات غير صحيحة أو أقل دقة، وهي ظاهرة تعرف باسم "القمامة الداخلة والقمامة الخارجة" (GIGO) (بالإنجليزية: Garbage In - garbage Out). وبالتالي، فالمعالجة المسبقة للبيانات هي أهم مرحلة من مراحل تعلم الآلة خاصة في علم الأحياء المُحوسَب، والتأكد من جودة البيانات مرحلة لازمة قبل إجراء أي عمليات من أجل الحصول على نتائج سليمة ومُعبّرة تعبيرا صحيحا. إذا وُجدت نسبة عالية من المعلومات غير المهمة أو المكررة، أو إذا كانت البيانات مليئة بالتشويش وغير موثوقة، فإن عملية استخراج المعرفة خلال مرحلة التدريب تصبح أكثر صعوبة. كما أن خطوات إعداد البيانات وتصفية البيانات يمكن أن تستغرق وقتًا كبيرًا من المعالجة.
معالجة مسبقة للبيانات
ومن أمثلة الأساليب المستخدمة في المعالجة المسبقة للبيانات: تنظيف البيانات، اختيار المثيل، التطبيع (بالإنجليزية: normalization)، تشفير الواحد النشِط، تحويل البيانات، استخراج الخصائص، وانتقاء الخصائص.
قد تؤثر المعالجة المسبقة للبيانات على تفسير نتائج التحليل ككل. ومن ثم، لا بد من ممارسة الحكمة عند استخدام الأدوات المختلفة كجزء من هذه العملية، مع فهم الآثار التي تخلقها هذه الأدوات على تفسير النتائج. إن تحليل البيانات التي لم يتم فحصها بدقة بحثًا عن هذه الأخطاء والمشكلات قد يؤدي إلى استنتاجات ونتائج غير دقيقة. لذلك، يعتمد نجاح مشاريع علم البيانات واستخراج البيانات إلى حد كبير على جودة إعداد البيانات أثناء المعالجة المسبقة للبيانات.
معالجة مسبقة للبيانات فوائد معالجة البيانات مسبقًا
غالبًا ما يعاني علماء البيانات من أنهم بدلاً من تقييم البيانات، يقضون وقتًا طويلاً في الحصول عليها ومعالجتها مسبقًا وتنظيمها. تعتبر معالجة البيانات بشكل صحيح أحد أهم الأنشطة في عملية استخراج البيانات. يتيح هذا للمستخدمين النهائيين التركيز بشكل أكبر على تحليل البيانات وبناء النماذج.
معالجة مسبقة للبيانات تصنيف مهام المعالجة المسبقة للبيانات
تُصنَّف مهام المعالجة المسبقة للبيانات بوجه عام ضمن أربع فئات رئيسية، هي: تنظيف البيانات، تكامل البيانات، تحويل البيانات، وتقليل البيانات. ولا يشترط تنفيذ هذه المهام وفق ترتيب ثابت، بل يمكن تكرارها وتكييفها بحسب طبيعة مجموعة البيانات المُراد معالجتها، حيث قد لا تكون جميع الخطوات ضرورية في كل حالة.
تهدف هذه المرحلة إلى معالجة القيم المفقودة، وتخفيف التشويش، والتعامل مع القيم الشاذة، ومعالجة التناقضات في البيانات.
البيانات الغريبة (الاستثنائية): وهي بيانات صحيحة لكنها تختلف بشكل كبير عن السياق العام، وقد تكون ذات أهمية في بعض التطبيقات (مثل اكتشاف التطفل)، أو تمثل عبئًا في تطبيقات أخرى. يمكن اكتشافها عبر تقنيات أحادية أو متعددة المتغيرات، ثم حذفها أو استبدالها بقيم مناسبة.
يُقصد به إعادة صياغة البيانات أو تلخيصها أو إعادة تمثيلها بطريقة تُسهل استخدامها لاحقًا في التحليل أو النمذجة.
معالجة مسبقة للبيانات تصنيف مهام المعالجة المسبقة للبيانات
التطبيع (Normalization): تحويل القيم العددية إلى نطاق موحّد (مثل 0 إلى 1 أو -1 إلى 1) لضمان اتساق القياسات، خاصة في النماذج التي تعتمد على المسافات. من تقنياته تحويل Min-Max وتحويل Z-Score.
يُستخدم عند دمج بيانات قادمة من مصادر متعددة ذات بنى أو صيغ مختلفة، مما قد يسبب مشكلات في التحليل بسبب التباين.
تعارض القيم: ينتج من استخدام رموز أو وحدات مختلفة لتمثيل نفس المعلومة (مثل استخدام الكيلوجرام مقابل الغرام). لمعالجة هذه التعارضات، يتم توحيد المخططات والقيم عبر النظام بأكمله، مما يُسهّل عمليات التحليل لاحقًا.
بما أن الحجم الكبير للبيانات يزيد من عبء المعالجة، يتم تقليل حجم البيانات مع الحفاظ على قدرتها التمثيلية والنتائج التحليلية المتوقعة. تشمل تقنيات تقليل البيانات:
معالجة مسبقة للبيانات التطبيقات
لقد أصبح تحليل البيانات الضخمة، أو تحديد الاتجاهات والأنماط في مجموعات البيانات الضخمة للغاية، نشاطًا شائعًا. تبحث الشركات دائمًا عن طرق لتقليل التكاليف وزيادة الإيرادات والحصول على مزايا تنافسية على الآخرين. ويعد جمع البيانات واستخدامها حاليًا أحد أهم الطرق لتحقيق هذه الأهداف، وتبحث الشركات بشكل متزايد عن طرق لتحويل البيانات إلى قيمة. قبل تحليل البيانات، لا بد من تنظيمها في تنسيق مناسب. إعداد البيانات ومعالجتها المسبقة هي معالجة البيانات مسبقًا وتنظيمها قبل التحليل. عادةً ما يكون إعداد البيانات عملية تكرارية تعمل على تحويل البيانات الخام إلى شكل أكثر هيكلة مناسب لمزيد من المعالجة والتحليل.
معالجة مسبقة للبيانات التطبيقات
تتكون عملية التحضير بأكملها من العديد من الأنشطة أو المهام الرئيسية، بما في ذلك إنشاء ملف تعريف البيانات، والتنظيف، والتكامل، والتحويل.  وفقًا لبعض التقديرات، تستغرق مهام المعالجة المسبقة ما يصل إلى 50-80% من الوقت والجهد المبذول في عملية التعدين. يشكل هذا الوقت والتكلفة جزءًا كبيرًا من التكاليف المرتبطة بتعدين البيانات. ومع ذلك، فإن الشركات التي لا ترغب في الاستثمار في استخراج البيانات لن تكون قادرة على المنافسة بشكل فعال في مجالها.
عند إعداد البيانات، يمكنك إنشاء مجموعة بيانات من مصدر بيانات واحد أو أكثر للاستكشاف والتصور والنمذجة.
أثناء معالجة البيانات مسبقًا، يتم تصحيح بعض الأخطاء المطبعية، والاختصارات غير الصحيحة، وعلامات الترقيم غير الصحيحة، وأخطاء التنسيق، والتاريخ غير الصحيح في البيانات، وما إلى ذلك، وغالبًا ما تكون عملية معالجة البيانات المسبقة إجراءً يستغرق وقتًا طويلاً وعرضة للخطأ. في بعض الأحيان قد يشمل هذا أيضًا إزالة الأحرف الخاصة من البيانات لجعلها قابلة للقراءة بواسطة آلات الذكاء الاصطناعي.
معالجة مسبقة للبيانات التطبيقات
تُتيح المعالجة المسبقة للبيانات إزالة العناصر غير المرغوب بها من خلال تنظيف البيانات، مما يؤدي إلى الحصول على مجموعة بيانات تحتوي على معلومات أكثر قيمة خلال المراحل اللاحقة من تنقيب البيانات ومعالجتها.
وتُعد عملية تحرير هذه البيانات—سواء لتصحيح الأخطاء البشرية أو إصلاح تلف البيانات—خطوة حاسمة للحصول على مؤشرات دقيقة، مثل:
وهي مقاييس تُستخدم بشكل شائع في مصفوفة الالتباس (Confusion Matrix)، خاصة في تشخيص الحالات الطبية.
يمكن للمستخدمين دمج ملفات البيانات واستخدام المعالجة المسبقة لتصفية التشويش غير الضروري، مما يُعزز دقة التحليل. وغالبًا ما يُستخدم البرمجة بلغة بايثون مع مكتبة pandas لاستيراد البيانات من ملفات CSV وتحويلها إلى إطار بيانات (DataFrame)، مما يُسهّل التعامل مع البيانات ويُغني عن استخدام Excel في حالات أكثر تعقيدًا.
تُعد pandas أداة قوية تتيح التحليل والتلاعب بالبيانات، وتُبسط عمليات مثل التصور البياني، والإحصاء، وغيرها من الوظائف المعقدة. كما أن العديد من المستخدمين يعتمدون أيضًا على لغة R لإنجاز مهام مماثلة.
معالجة مسبقة للبيانات التطبيقات
أسباب تحويل الملفات الأصلية إلى ملفات جديدة متعددة، وتشمل عمليات مثل:
أما التقنيات المتقدمة مثل تحليل المكونات الرئيسية (PCA) واختيار الميزات (بالإنجليزية: Feature Selection)، فهي تعتمد على صيغ إحصائية وتُطبّق غالبًا على مجموعات بيانات معقدة يتم جمعها بواسطة أجهزة تتبع المواقع (GPS) أو أجهزة التقاط الحركة (بالإنجليزية: Motion Capture).
تنقيب البيانات الدلالي (بالإنجليزية: Semantic Data Mining) هو فرع من تنقيب البيانات يهدف بشكل خاص إلى دمج مجال التطبيقات (بالإنجليزية: domain knowledge) مثل الدلالات الرسمية (بالإنجليزية: formal semantics) في عملية التنقيب عن البيانات.
ومجال التطبيقات هو فهم البيئة أو السياق الذي تم فيه جمع أو معالجة البيانات. ويمكن لهذه المعرفة أن تؤثر إيجابيًا في عدة جوانب من تنقيب البيانات، مثل:
تسعى المعالجة المسبقة الدلالية إلى تصفية البيانات (بالإنجليزية: data filtration) باستخدام السياق الأصلي الذي وُلدت فيه هذه البيانات، وذلك بشكل أكثر دقة وكفاءة.
معالجة مسبقة للبيانات التطبيقات
تُعد الأنطولوجيا وسيلة لتجريد المعرفة الدلالية وتعريفها رسميًا. وبشكل عام، يساهم استخدام الأنطولوجيا في سد الفجوات بين البيانات والتطبيقات والخوارزميات والنتائج، وهي فجوات ناتجة عن اختلاف المعاني (اللبس الدلالي). وبناءً عليه، فإن التنقيب الدلالي للبيانات عند دمجه مع الأنطولوجيا يجد تطبيقات عديدة في المجالات التي يؤثر فيها الغموض الدلالي على كفاءة وفعالية أنظمة البيانات.
تشمل هذه المجالات: القطاع الطبي، ومعالجة اللغة، والقطاع المصرفي، والتعليم، وغيرها من التطبيقات المتنوعة.
يمتاز استخدام التنقيب الدلالي للبيانات والنُهج المعتمدة على الأنطولوجيا بعدّة نقاط قوة. يمكن لهذه الأدوات أن تُسهم بفعالية خلال مرحلة المعالجة المسبقة للبيانات، وذلك من خلال تصفية البيانات غير المرغوبة قبل الدخول في مرحلة التحليل. علاوة على ذلك، فإن التكامل بين الدلالات الرسمية المنظمة (بالإنجليزية: formal semantics) والأنطولوجيات المصممة بعناية يمكن أن ينتج عنه بيانات قوية وسهلة القراءة والمعالجة بواسطة الأنظمة الحاسوبية.