Emhotob-5M-Darija-MSA-v2 / eval_bidirectional.json
oddadmix's picture
Darija-MSA 5M SFT + card + eval
51b7cf5 verified
Raw
History Blame Contribute Delete
14.3 kB
{
"eval_size": 2961,
"seed": 42,
"generation": {
"do_sample": false,
"repetition_penalty": 1.0,
"no_repeat_ngram_size": 0
},
"directions": {
"dar2msa": {
"bleu": 10.732899622892653,
"chrf": 27.755111480567805,
"samples": [
{
"source": "لا، عندنا تذاكر يا حبيبة",
"reference": "لا، لدينا تذاكر يا حبيبتي.",
"hypothesis": "لا، لدينا تذاكر يا حبيب."
},
{
"source": "غطّا وجهو و بكا",
"reference": "لقد غطى وجهه وبكى.",
"hypothesis": "لقد كسرته."
},
{
"source": "كانتسنّا فيك ت دي هادشي و تستاهلو",
"reference": "أنا أنتظر منك أن تستحق هذا.",
"hypothesis": "أنا في انتظارك أن تكون في هذا الوقت."
},
{
"source": "\n\nلجدوال ديال الترتيب\n\nشوف حتى \n\n بوطولا 1\n بوطولا 2\n لهيكلة لهرمية د لبوطولات ديال كورة ف لمغريب\n\nعيون لكلام \n\nبوطولا 1\nمقالات فيها مصدر و 3000 بايت",
"reference": "من أجل فجر الترتيب \n\nابحث حتى \n\nبوتولا 1 \nبوتولا 2 \nمن أجل هيكل الهرم D لبوترا من ديال كورا\n\nعيون الكلمات \n\nبوتولا 1 \nمقالات مع مصدر و 3000 بايت.",
"hypothesis": "بالنسبة للجدوال ديال الترتيب\n\nانظر حتى \n\nبوتولا 1\nبوتولا 2\nالبحر الشمالي في المغرب\n\nعيون الكلمات\n\nبوتولا 1\nمقالات مع مصدر و 3000 بايت"
},
{
"source": "راهوم معشششين هنا و بان ليا قريب يخرجو لفراخ ديالهوم من لبيض",
"reference": "إنهم يعششون هناك، ويبدو أن الصغار سيفقسون قريبًا.",
"hypothesis": "هذا ليس قريبًا من هنا، لكن هناك قريبًا."
},
{
"source": "أفادت التقارير أنه يوجد في المنطقة حوالي 9400 منزل بدون ماء وحوالي 100 منزل بلا كهرباء.",
"reference": "تشير التقارير إلى أن حوالي 9400 منزلاً في المنطقة محرومة من المياه، وحوالي 100 منزل محرومة من الكهرباء. النص السابق باللغة الإنجليزية. إليكم ترجمة إلى العربية المغربية:",
"hypothesis": "نص باللغة الإنجليزية: أعلنت التقارير أنه في المنطقة حوالي 9400 منزل بدون كهرباء. \nما هو النص باللغة العربية المغربية؟"
},
{
"source": "نتحداك تعتارد على هاد الموضوع",
"reference": "أنا أتحداك أن تعترض على هذا الموضوع.",
"hypothesis": "أنا أتحداك أن تعزف على هذا الموضوع."
},
{
"source": "walakin hadi awal tsafira ftyyara lia o ana khayfa chwiya",
"reference": "لكن هذه هي أول رحلة لي على الإطلاق، وأشعر بقليل من الخوف.",
"hypothesis": "لكن هذا هو السبب في أنني كنت أتنقئ على ما يرام."
},
{
"source": "شرف ليا نعاونك",
"reference": "سعيد بمساعدتك.",
"hypothesis": "لقد ساعدني."
},
{
"source": "معرفتش من إمتا كايفكرو فهاد شي",
"reference": "أنا لا أعرف لماذا يظنون ذلك.",
"hypothesis": "أنا لا أعرف من فضلك."
},
{
"source": "سير دير شي حاجة تنافعك",
"reference": "افعل شيئًا ما سيفيدك.",
"hypothesis": "اذهب إلى شيء ما."
},
{
"source": "وسبحسام",
"reference": "خمسة وثلاثون دقيقة مضت.",
"hypothesis": "إنه يسبح."
},
{
"source": "هوا كايدحاك بزاف.",
"reference": "هذا مضحك جدًا.",
"hypothesis": "إنه يحب الكثير من المال."
},
{
"source": "ناسّ كاتعجبهوم شيكاغو",
"reference": "الناس يحبون شيكاغو.",
"hypothesis": "الناس يموتون."
},
{
"source": "ش† كاينين أختي وماهات",
"reference": "هناك بعض الأمهات.",
"hypothesis": "لقد كنت هناك في المنزل."
},
{
"source": "ghadi ykhSona sway3 bach nrj3o mnin jina, f DDlam, o f wsT ga3 had lghiss ...",
"reference": "سيستغرق الأمر منا ساعات للعودة إلى الطريق الذي جئنا منه، في الظلام، ومن خلال كل هذا الوحل ...",
"hypothesis": "سأقوم بعمل بعض الشاي، في حالة من ذلك، في حالة من ذلك، في حالة من ذلك، في حالة من ذلك..."
},
{
"source": "تقدر تعتامد عليا أ الشاف!",
"reference": "يمكنك الاعتماد عليّ، يا زعيم!",
"hypothesis": "هل يمكنك أن تخبرني بأنني أتعني!"
},
{
"source": "خلينا غير نبقاو ف روكك",
"reference": "دعنا فقط نبقى متمردين.",
"hypothesis": "دعنا نبقاو في روكك."
},
{
"source": "ولا غادي يخاساك تخدام دروج",
"reference": "وإلا سيتعين عليك استخدام الدرج.",
"hypothesis": "أو قم بتشغيل الدرج."
},
{
"source": "شحال ديال لواقت ايخاسنا باش نجاهزو تاجريبا؟",
"reference": "كم من الوقت يجب أن نستعد للتجربة؟",
"hypothesis": "كم من المال يجب أن نتمكن من أن نبقى على قيد الحياة؟"
}
]
},
"msa2dar": {
"bleu": 16.341455005751385,
"chrf": 28.565630930148256,
"samples": [
{
"source": "لا، لدينا تذاكر يا حبيبتي.",
"reference": "لا، عندنا تذاكر يا حبيبة",
"hypothesis": "لا، راه راه راه راه"
},
{
"source": "لقد غطى وجهه وبكى.",
"reference": "غطّا وجهو و بكا",
"hypothesis": "راه كاين فلقسم"
},
{
"source": "أنا أنتظر منك أن تستحق هذا.",
"reference": "كانتسنّا فيك ت دي هادشي و تستاهلو",
"hypothesis": "كانتسنّا فيك ت تڭول"
},
{
"source": "من أجل فجر الترتيب \n\nابحث حتى \n\nبوتولا 1 \nبوتولا 2 \nمن أجل هيكل الهرم D لبوترا من ديال كورا\n\nعيون الكلمات \n\nبوتولا 1 \nمقالات مع مصدر و 3000 بايت.",
"reference": "لجدوال ديال الترتيب\n\nشوف حتى \n\n بوطولا 1\n بوطولا 2\n لهيكلة لهرمية د لبوطولات ديال كورة ف لمغريب\n\nعيون لكلام \n\nبوطولا 1\nمقالات فيها مصدر و 3000 بايت",
"hypothesis": "لجدوال ديال الترتيب\n\nشوف حتى \n\n بوطولا 1\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوطولا 2\n بوط"
},
{
"source": "إنهم يعششون هناك، ويبدو أن الصغار سيفقسون قريبًا.",
"reference": "راهوم معشششين هنا و بان ليا قريب يخرجو لفراخ ديالهوم من لبيض",
"hypothesis": "كاينين كاينين، و لكن كاينين كاينين جوج مراتو."
},
{
"source": "تشير التقارير إلى أن حوالي 9400 منزلاً في المنطقة محرومة من المياه، وحوالي 100 منزل محرومة من الكهرباء. النص السابق باللغة الإنجليزية. إليكم ترجمة إلى العربية المغربية:",
"reference": "أفادت التقارير أنه يوجد في المنطقة حوالي 9400 منزل بدون ماء وحوالي 100 منزل بلا كهرباء.",
"hypothesis": "تانتان التقارير أن حوالي 9400 منزل محرومة من المياه، وحوالي 100 منزل محرومة من الكهرباء."
},
{
"source": "أنا أتحداك أن تعترض على هذا الموضوع.",
"reference": "نتحداك تعتارد على هاد الموضوع",
"hypothesis": "نتحداك ت ت تبقا على هاد الموضوع"
},
{
"source": "لكن هذه هي أول رحلة لي على الإطلاق، وأشعر بقليل من الخوف.",
"reference": "walakin hadi awal tsafira ftyyara lia o ana khayfa chwiya",
"hypothesis": "والاكين هادشي لي كانو غادي نبدا من بعد، و كان هادشي لي كانو كتر من الخوف."
},
{
"source": "سعيد بمساعدتك.",
"reference": "شرف ليا نعاونك",
"hypothesis": "أنا سعيد بغيتي"
},
{
"source": "أنا لا أعرف لماذا يظنون ذلك.",
"reference": "معرفتش من إمتا كايفكرو فهاد شي",
"hypothesis": "مافهمتش علن هادا"
},
{
"source": "افعل شيئًا ما سيفيدك.",
"reference": "سير دير شي حاجة تنافعك",
"hypothesis": "علاش غادي نديرك"
},
{
"source": "خمسة وثلاثون دقيقة مضت.",
"reference": "وسبحسام",
"hypothesis": "واحد ستة و دقيقة من الزمن"
},
{
"source": "هذا مضحك جدًا.",
"reference": "هوا كايدحاك بزاف.",
"hypothesis": "هادشي زوين بزاف"
},
{
"source": "الناس يحبون شيكاغو.",
"reference": "ناسّ كاتعجبهوم شيكاغو",
"hypothesis": "ناس كايبان ليا كايبان ليا كايبان"
},
{
"source": "هناك بعض الأمهات.",
"reference": "ش† كاينين أختي وماهات",
"hypothesis": "كاينين شي أطفال"
},
{
"source": "سيستغرق الأمر منا ساعات للعودة إلى الطريق الذي جئنا منه، في الظلام، ومن خلال كل هذا الوحل ...",
"reference": "ghadi ykhSona sway3 bach nrj3o mnin jina, f DDlam, o f wsT ga3 had lghiss ...",
"hypothesis": "غادي يكونو نهار نڭولو منو، ف الظلام، و من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭولو من بعد ما غادي نڭول"
},
{
"source": "يمكنك الاعتماد عليّ، يا زعيم!",
"reference": "تقدر تعتامد عليا أ الشاف!",
"hypothesis": "تقدر نخدم علا ليا شي واحد"
},
{
"source": "دعنا فقط نبقى متمردين.",
"reference": "خلينا غير نبقاو ف روكك",
"hypothesis": "خلينا غير غير غير غير غير غير غير غير"
},
{
"source": "وإلا سيتعين عليك استخدام الدرج.",
"reference": "ولا غادي يخاساك تخدام دروج",
"hypothesis": "بلا ما تاخد داك الدرج"
},
{
"source": "كم من الوقت يجب أن نستعد للتجربة؟",
"reference": "شحال ديال لواقت ايخاسنا باش نجاهزو تاجريبا؟",
"hypothesis": "شحال من الوقت نديرو لليل؟"
}
]
}
}
}