اشترك بالحزمة الذهبية واحصل على وصول غير محدود شمرا أكاديميا
تسجيل مستخدم جديدالأفوكادو: استراتيجية تكييف المفردات إلى المجال المصب
AVocaDo: Strategy for Adapting Vocabulary to Downstream Domain
187
0 0
0.0
(
0
)
نشر من قبل
جمعية اللغويات الحاسوبية ACL مقالة
تاريخ النشر
2021
مجال البحث
الذكاء الاصناعي
والبحث باللغة
English
تمت اﻹضافة من قبل
Shamra Editor
اسأل ChatGPT حول البحث
خلال مرحلة التوصيل الدقيقة للتعلم، لا يزال المفردات المسبدة مسبقا دون تغيير، في حين يتم تحديث المعلمات النموذجية.المفردات الناتجة بناء على البيانات المحددة مسبقا هي فرعية نفسية للبيانات المصب عند وجود تناقض المجال.نقترح النظر في المفردات كمعلمة قابلة للتحسين، مما يسمح لنا بتحديث المفردات من خلال توسيعها مع المفردات المحددة للمجال بناء على إحصاء التكتيف.علاوة على ذلك، نحافظ على تضيير الكلمات المضافة من التجاوز إلى البيانات المصب عن طريق الاستفادة من المعرفة المستفادة من نموذج لغة مسبق مع مصطلح التنظيم.حققت طريقتنا تحسينات أداء ثابتة حول مجالات متنوعة (أي، العلوم الطبية الحيوية، علوم الكمبيوتر، الأخبار، والمراجعات).
During the fine-tuning phase of transfer learning, the pretrained vocabulary remains unchanged, while model parameters are updated. The vocabulary generated based on the pretrained data is suboptimal for downstream data when domain discrepancy exists. We propose to consider the vocabulary as an optimizable parameter, allowing us to update the vocabulary by expanding it with domain specific vocabulary based on a tokenization statistic. Furthermore, we preserve the embeddings of the added words from overfitting to downstream data by utilizing knowledge learned from a pretrained language model with a regularization term. Our method achieved consistent performance improvements on diverse domains (i.e., biomedical, computer science, news, and reviews).
المراجع المستخدمة
https://aclanthology.org/
قيم البحث
اقرأ أيضاً
نظرا لأن العمل الفيدرالي لريتشارد مونتاجي في السبعينيات، فقد تم استخدام الأدوات الرياضية والمنطق بنجاح لنموذج عدة جوانب لمعنى اللغة الطبيعية. ومع ذلك، فإن الأشخاص الذين يعانون من ضعف البصر يواصلون مواجهة صعوبات خطيرة في الوصول الكامل إلى هذا الصك اله
ام. تهدف ورقتنا إلى تقديم عمل جاري تنفيذ هدفه الرئيسي هو توفير طلاب وباحثين أعمى مع طريقة كافية للتعامل مع الموارد المختلفة المستخدمة في دلالات رسمية. على وجه الخصوص، نعتزم تكييف نظام برايل البرتغالي لاستيعاب الرموز والصغري الأكثر شيوعا المستخدمة في هذا النوع من النهج وتطوير إجراءات تتروية لتسهيل قدرتها على تكنولوجيا المعلومات. من خلال إجراء هذا إضفاء الطابع الرسمي على تشفير طريقة برايل (إما تقليدية وإلكترونية)، نأمل في مساعدة الأعمى على التعلم واستخدام هذه التدوين، من الضروري الحصول على فهم أفضل لعدد كبير من الممتلكات الدلالية المعروضة باللغة الطبيعية.
يهدف البحث إلى دراسة ثمار و بذور الأفوكادو، من حيث التركيب الكيميائي، و من حيث خواص الزيت المستخلص منها و مقارنتها مع ثمار و بذور زيتية أخرى .
أظهرت النتائج أن نسبة الزيت في الثمار قد وصلتْ إلى حدود (12.4%) ، أما بذور الأفوكادو فقد احتوت على نسبة مت
دنية منَ الزيت تصل إلى (1.92 %) فقط من مجمل وزن البذور الجاف , و بلغت قيمة رقم حموضة عينات زيت الثمار البذور على التوالي (1.62 , 4.3 مغ KoH/غ زيت) و بلغ رقم البيروكسيد حدوداً منخفضة مقارنةً بباقي الزيوت (3.71 ، 2.2 ميللمكافئ /O2 كغ) في عينات زيت ثمار و بذور الأفوكادو على التوالي , و بلغ الرقم اليودي (45.78 غ يود/غرام) في زيت البذور و وصل إلى حدود (84- 77) غ يود/100غ ) في زيت ثمار الأفوكادو, و بينت النتائج أن أغلب الأحماض الدهنية الداخلة في تركيب زيت الثمار، هي أحماض دهنية غير مشبعة، إذ بلغت نسبتها ما يقارب (77.77% و 57.45%) ، بينما بلغت نسبة تلك الأحماض الأخرى المشبعة حدود (21.77% و 42.54%) فقط في زيت الثمار و البذور على الترتيب , كما بينت النتائج أن بذور الأفوكادو تحتوي على (52.5 %) رطوبة و على (7.45% ) ألياف خام , (8.53%) سكريات ذائبة، (4.69%) بروتين ، (2.34%) رماد ، و بلغت نسبة النشا حدوداً مرتفعة (59.3%) على أساس الوزن الجاف.
الهدف من التنبؤ بمفردات المخزون هو التنبؤ بمفردات متعلم كله بناء على عينة محدودة من كلمات الاستعلام.تقترب هذه الورقة عن المشكلة بدءا من نموذج نظرية استجابة البند 2-المعلمة (IRT)، مما يمنح كل كلمة في المفردات معلمة صعوبة والتمييز.يتم تقييم المعلمة الت
مييز على مشكلة اختيار البند المسئولية الفرعية، مألوفة من مجالات الاختبار التكيفي المحوسب (القط) والتعلم النشط.بعد ذلك، يتم فحص تأثير المعلمة التمييز على أداء التنبؤ، سواء في إعداد تصنيف ثنائي، وفي بيئة استرجاع المعلومات.يتم مقارنة الأداء مع خط الأساس بناء على تردد Word.يتم فحص عدد من سيناريوهات التعميم المختلفة، بما في ذلك صعوبة الكلمة المعممة والتمييز باستخدام Adgeddings Word مع شبكة مؤشر واختبار بيانات خارج مجموعة البيانات.
أعطتْ إضافة المطحون المغربل من بذور الأفوكادو إلى خلطات دقيق القمح المُعدة للخبيز بالنسب المدروسة ، ارتفاعاً في محتواها من المكونات التالية: (رطوبة ، ألياف ، رماد ، نشا ، سكريات ذائبة كلية) و ذلك بزيادة نسبة الخلط بهذا المطحون ، بينما انخفضت نسبة الب
روتين ؛ كما تراجعت نوعية الجلوتين في عينات الدقيق بعد العجن و ذلك بشكل طفيف في الخلطتين (5 ، 10%) ، بينما كان التراجع في نوعية الجلوتين أوضح في الخلطتين 15 ، 20% .
تحسنت بعض الصفات النوعية ، و الصفات الحسيّة (المذاقية) للخبز العربي (الشامي) و خبز الفينو ، مثل : نسبة الرطوبة المفقودة خلال التبريد و خلال التسوية أو الخبز ، بزيادة نسبة مطحون بذور الأفوكادو في خلطات الدقيق، كذلك تحسّنتْ الصفات الحسية (المذاقية) لعينات الخبز العربي (الشامي) و خبز الفينو ، بزيادة نسبة مطحون بذور الأفوكادو في خلطات الدقيق ، باستثناء نسبة الخلط 20% فقد خفّضت من الصفات الحسية (المذاقية) مقارنةً بعينات الشاهد .
و تراجعت فقط الصفة الحسية (الطعم) لعينات الخبز العربي (الشامي) و خبز الفينو المعدة من خلطات الدقيق بنسبة 15 ، 20% مطحون بذور الأفوكادو حيث تميزت العينات المذكورة بظهور طعم لاذع ، و حصلت على درجة ضعيفة لناحية الطعم .
نقدم Bertweetfr، أول نموذج لغوي مدرب مسبقا على نطاق واسع للتغريدات الفرنسية.يتم تهيئ نموذجنا باستخدام نموذج اللغة الفرنسية المجال للمجال Camembert الذي يتبع بنية Base Bert.تظهر التجارب أن Bertweetfr Outperforms جميع نماذج اللغة الفرنسية العامة في الم
جال السابق على اثنين من مهام Twitter Twitter من Twitter من تحديد الاجثافية التعرف على الكيان المسمى.تم إنشاء DataSet المستخدمة في مهمة كشف الاجزاسية أولا وشروحة من قبل فريقنا، وملء فجوة هذه البيانات التحليلية في الفرنسية.نجعل نموذجنا متاحا علنا في مكتبة المحولات بهدف تعزيز البحث في المستقبل في المهام التحليلية للتغريدات الفرنسية.
الأسئلة المقترحة
سجل دخول لتتمكن من نشر تعليقات
التعليقات
جاري جلب التعليقات
سجل دخول لتتمكن من متابعة معايير البحث التي قمت باختيارها
