إنه يعتقد أنه يعرف أفضل من الأطباء: بيرتف لفشل التوظيف في الحدث على البراغماتية

الملخص الذي نحقق فيه كيف ينفذ جيدا بيرت بشأن التنبؤ بالمستقوية في العديد من مجموعات البيانات الإنجليزية القائمة، وشمل مختلف الإنشاءات اللغوية.على الرغم من أن بيرت يحصل على أداء قوي على معظم مجموعات البيانات، إلا أنه يفعل ذلك من خلال استغلال أنماط السطح المشتركة التي ترتبط مع بعض الملصقات في الواقعية، وفشلها على الحالات التي يكون فيها التفكير العملي ضروري.على عكس ما يقترحه الأداء العالي، ما زلنا بعيدين عن وجود نظام قوي للتنبؤ بالحقائق.

Abstract We investigate how well BERT performs on predicting factuality in several existing English datasets, encompassing various linguistic constructions. Although BERT obtains a strong performance on most datasets, it does so by exploiting common surface patterns that correlate with certain factuality labels, and it fails on instances where pragmatic reasoning is necessary. Contrary to what the high performance suggests, we are still far from having a robust system for factuality prediction.