التقدم الملخص في النمذجة المتبادلة يعتمد على مجموعات التقييم الصعبة والواقعية والتنوع.نقدم أسئلة وأجوبة معارف متعددة اللغات (MKQA)، وهي سؤالا مفتوحا في مجال الإجابة على مجموعة التقييم التي تضم أزواج من الإجابات السؤال 10 كيلو محاذاة عبر 26 لغة متنوعة
من الناحية النموذجية (أزواج الإجابة السؤال 260k في المجموع).تستند الإجابات إلى تمثيل بيانات غير مستقر بشدة، مما يجعل النتائج قابلة للمقارنة عبر اللغات والمستقل عن الممرات الخاصة باللغة.مع 26 لغة، توفر مجموعة البيانات هذه الأوسع نطاقا من اللغات حتى الآن لتقييم الإجابة على السؤال.نحن نقسم مجموعة متنوعة من الأساليب وخطوط الأساس للدولة والأساس للاستخراج الاستقبال، المدربين على الأسئلة الطبيعية، في صفر لقطة وإعدادات الترجمة.تشير النتائج إلى أن هذه البيانات تتحدى حتى باللغة الإنجليزية، ولكن خاصة في لغات الموارد المنخفضة
