eval_bidirectional.json

{
  "eval_size": 3000,
  "seed": 42,
  "generation": {
    "do_sample": false,
    "repetition_penalty": 1.0,
    "no_repeat_ngram_size": 0
  },
  "directions": {
    "en2egy": {
      "bleu": 9.816687424449404,
      "chrf": 34.218294018956044,
      "samples": [
        {
          "source": "So what should I get you? Should I get you this or that? Just imagine the scene: sitting now, wearing a sleeveless undershirt, eating the best piece of meat you'll ever have in your life.",
          "reference": "طب أجيب لك إيه؟ أجيب لك دي ولا دي؟ تخيل كده المنظر، قاعد دلوقتي لابس فانلة بحمالات وبتاكل أحلى حتة لحمة ممكن تكلها في حياتك.",
          "hypothesis": "يعني إيه اللي ياخدك؟ أخدك كده ولا ده؟ تخيلوا الجايزة: قعدوا على طول، لابس تيشيرت أحسن حاجه، كل شوية تيشيرت حاجه هتبقى في حياتك."
        },
        {
          "source": "Prayer niches (mihrabs)",
          "reference": "محاريب الصلاة",
          "hypothesis": "مفيش أي حد"
        },
        {
          "source": "Cardamom, grains of paradise, cardamom, black pepper, and a little salt. We'll just sprinkle these on, with some bay leaves, and we'll add a big lemon so it doesn't darken — here's the big lemon.",
          "reference": "حبهان وفلفل اسود وشويه ملح، هنرشهم عليها مع ورق لوري، وهنحطلها ليمونة كبيرة عشان لونها ما يغمقش - اهي ليمونة كبيرة.",
          "hypothesis": "يا مدام، جاية، دكتورة، فلفل، فلفل، وشوية ملح، وبيض، وهضيف شوية ملح، وهضيف على طول عشان ما يكسرش، هنا البسبوسة."
        },
        {
          "source": "Man, these things happen. Sometimes Liverpool loses the match, and other times Real Madrid wins it.",
          "reference": "يا عم الحاجات دي بتحصل، ساعات ليفربول بتخسر الماتش وساعات ريال مدريد بيكسب.",
          "hypothesis": "يا عم الحاجات دي بتتفرج على ليفربول على الماتش، وفي أوقات تانية بتتفرج على الماتش التاني."
        },
        {
          "source": "I will be fine, don't worry",
          "reference": "انا هبقى كويسة، ما تقلقيش",
          "hypothesis": "أنا هقدر آمين، ما تقلقش"
        },
        {
          "source": "I want grilled chicken, kofta on charcoal, and Pepsi.",
          "reference": "انا عايز فراخ مشوية وكفتة على الفحم وبيبسي.",
          "hypothesis": "أنا عايز أخف الفراخ، كفتة على الفحم، واورما."
        },
        {
          "source": "Your age",
          "reference": "سنك",
          "hypothesis": "أسبوعك"
        },
        {
          "source": "By the way, today, it's interesting to see how these two teams will handle the result, each playing in their own way. Whether it's Klopp trying to give hope, even if it's just 10%, that we can achieve the impossible in Madrid against a very tough opponent, or, if not, we’ll at least have a clear, explicit, and realistic goal so the season doesn't slip away from us. A win would make all Liverpool fans completely quiet with Jurgen Klopp and give them an injection of hope until the end of the season, at least. Unlike United, who desperately need an automatic, clear, and decisive reaction starting from the Europa League against Real Betis. These tough, historic results stay in our memories regardless of your position in the league—we all remember them.",
          "reference": "على فكره، النهارده الموضوع هيبقى interesting نشوف الفريقين دول هيتعاملوا مع النتيجه ازاي، وكل واحد هيلعب بطريقته. سواء كلوب هيحاول يدي أمل، حتى لو بنسبة ١٠٪، إننا نقدر نعمل المستحيل في مدريد قدام خصم تقيل جداً، أو لو لأ، يبقى على الأقل عندنا هدف واضح وصريح وواقعي عشان الموسم ما يضيعش مننا. الفوز هيخلي جمهور ليفربول يسكت تماماً مع يورجن كلوب ويديهم جرعة أمل لحد نهاية الموسم على الأقل. على عكس يونايتد اللي محتاج رد فعل سريع وواضح وصريح ابتداءً من اليوروبا ليج قدام ريال بيتيس. النتائج الصعبة والتاريخية دي بتفضل في الذاكرة مهما كان مركزك في الدوري – كلنا فاكرينها.",
          "hypothesis": "على فكرة، النهارده، هي مهتمة إن الفرق اللي بتتعبوا على النتيجة، كل لاعب بيحاولوا يكسبوا. سواء كلوب بيحاولوا يدي أمل، حتى لو هيبقى 10% إحنا نقدر نحقق النتيجة في مدريد ضد لاعب صعب جدًا، أو لو مش هينفع في الآخر، مع إن إحنا في المركز الأول، بالظبط، ونرجع تاني تاني. كملوا ليفربول على طول على طول خالص، زي ما هيبقى في الآخر، واضح، وبيطلعوا قرار من أمل لحد آخر الموسم. مع إن يونايتد، اللي هيبقى محتاج واحد، واضح، وبيطلع من غير مكان، في المركز التاني. كفاية يا أستاذ، النتيجة النهائية في تاريخنا في تاريخنا في الدوري، وكل فاكرهم."
        },
        {
          "source": "So, do we have to pay here?",
          "reference": "يعني إحنا لازم ندفع هنا؟",
          "hypothesis": "طب احنا لازم نحسب هنا؟"
        },
        {
          "source": "I think we will know that.",
          "reference": "أظن إحنا هنعرف ده.",
          "hypothesis": "أنا شايف إننا هعرفنا كده."
        },
        {
          "source": "Option please, excuse me, thank you.",
          "reference": "أوبشن لو سمحت، بعد إذنك، شكراً.",
          "hypothesis": "ممكن، معلش، شكراً."
        },
        {
          "source": "That's what people say, I don't know.",
          "reference": "ده اللي الناس بتقوله، معرفش.",
          "hypothesis": "ده اللي بيقول، أنا مش عارف."
        },
        {
          "source": "No sir, he's going to clean up this mess. He might come if France fails in this tournament. No sir, they supported him until he asked 'which cup is this?' I mean, this is Mbappe, he'll play in 2026. On paper, yes, but if he gets eliminated early, like in the round of 16, God knows. He was eliminated from Euro 2021, true, but when they gave him a chance to continue, he did really well.",
          "reference": "لا يا باشا، هو هينضف الليلة دي. ممكن ييجي لو فرنسا فشلت في البطولة دي. لا يا باشا، كانوا معاه لحد ما قال هو الكاس ده إيه؟ يعني ده مبابي، هيلعب في 2026. على الورق آه، بس لو خرج بدري زي دور الستاشر، الله أعلم. هو خرج من اليورو 2021، صح، بس لما ادوله فرصة يكمل، أثبت نفسه جامد.",
          "hypothesis": "لا يا باشا، هو هيطلع على الجرس ده. ممكن ييجي لو فرنسا في البطولة دي. لا يا باشا، همشيه لحد ما سألوه 'بص على الكاس ده؟' يعني ده مبابي، هو هيلعب في 2026. على الورق، آه، بس لو جابوا بدري، زي في الجولة الجاية، يعني في دور الـ16، ربنا يعرفوه. كان تاني سنة 2021، صح، بس لما ييجي يجيبه فرصة، فعلاً كويس."
        },
        {
          "source": "Let me tell you, I ask them to parse what's underlined, and I say, 'the champion raises the cup.' 'Champion' is the subject. Then, Malak (a student) says to me, 'the subject is marked with a kasra (wrong grammatical case)'—can you imagine? I swear that's what happened!",
          "reference": "بص بقى، انا بسألهم يعربوا اللي تحتها خط، وبقول لهم البطل بيرفع الكاس، يعني 'البطل' هو المبتدأ. تقوم ملك، تخيلي، تقول لي: 'المبتدأ مرفوع بالكسر'! تخيلي! والله حصل كده.",
          "hypothesis": "بص، أنا بطلب منهم إيه في اللي فاهمه، وأنا بقولك: 'الأداء التاني.' 'الستة' هو اللي بيقول لي: 'الفيلم اللي بيعمله، 'البنتيني' بيقول لي: 'الستة' بتاعهم بيعملوا إيه؟ والله ده اللي حصل!'"
        },
        {
          "source": "What's my standard anyway? Forget about his standards, the awards' standards, and all that stuff.",
          "reference": "هو ايه اصلا المعيار بتاعي؟ سيبك بقى من معاييره ومعايير الجوايز وكل الكلام ده.",
          "hypothesis": "ايه اللي واقف كده؟ سيبك من محله، والستات، وكل الحاجات دي."
        },
        {
          "source": "I wish I could go back to being young, to the days when I didn't carry worries like I do now.",
          "reference": "يا ريت أرجع صغير تاني لأيام ماكنتش شايل هم زي دلوقتي.",
          "hypothesis": "يا ريت أروح أجيبلك صغير، أيام ما كنت ما شايفش إن أنا شايف إن أنا عايز أقدر أتعامل معايا دلوقتي."
        },
        {
          "source": "My question is, what kind of work is Guardiola doing with this one and that one? Where did he succeed? In Barcelona, he definitely succeeded with both. You can only succeed in Germany? No, I mean, can you appreciate what this man has done? This man worked hard and did something amazing.",
          "reference": "أنا سؤالي هو إيه الشغل اللي جوارديولا بيعمله مع ده ومع ده؟ هو نجح فين؟ في برشلونة نجح فعلاً مع الاتنين. يعني النجاح بس في ألمانيا؟ لا، أنا قصدي تقدّروا الراجل ده عمل ايه؟ الراجل ده تعب وعمل حاجه كبيرة.",
          "hypothesis": "أنا آسف، إيه شغل شغل جامد في الموضوع ده؟ هو كان إيه اللي عملته؟ في برشلونة، هو فعلاً كان المفروض ياخد معاه الاتنين. ممكن تقنعه في ألمانيا؟ لا، يعني ممكن تكوني في اللي هو عمل إيه؟ الراجل ده شغلانة وعايز أقدر أتصرف في حاجة جامدة."
        },
        {
          "source": "Check yourself, Mr. Harry. You destroyed Tottenham Club—looks like you were the problem. They might win this year now that Kane is gone or whatever.",
          "reference": "راجع نفسك يا عم هاري، انت خربت نادي توتنهام، شكلك كنت انت السبب. يمكن يكسبوا السنة دي بعد ما كين مشي ولا أي حاجة.",
          "hypothesis": "شجع نفسك يا أستاذ هاني. إنت جبت نادي توتنهام، شكله انت كنت المشكلة. ممكن يكسب السنة دي دلوقتي إن كلوب هي اللي جابه ولا إيه."
        },
        {
          "source": "Let's go, I'll get up, go to Rouh El Nagham, and call you on the phone.",
          "reference": "يلا، هقوم أروح روح النغم وهكلمك في التليفون.",
          "hypothesis": "يلا بينا، هجيب، روح يا راجل، وبقولك على التليفون."
        },
        {
          "source": "And he'll make the kids deal with a mean stepmother.",
          "reference": "وهيخلي العيال يتعاملوا مع مرات أب شريرة.",
          "hypothesis": "وبعدين هيعملوا العيال بتاعتي معايا."
        }
      ]
    },
    "egy2en": {
      "bleu": 16.694578457351152,
      "chrf": 36.065943935414495,
      "samples": [
        {
          "source": "طب أجيب لك إيه؟ أجيب لك دي ولا دي؟ تخيل كده المنظر، قاعد دلوقتي لابس فانلة بحمالات وبتاكل أحلى حتة لحمة ممكن تكلها في حياتك.",
          "reference": "So what should I get you? Should I get you this or that? Just imagine the scene: sitting now, wearing a sleeveless undershirt, eating the best piece of meat you'll ever have in your life.",
          "hypothesis": "Well, what do you get to you? Just go to you, or is this? Imagine this view, sit now, sit now, sit now, sit now, sit now, sit now."
        },
        {
          "source": "محاريب الصلاة",
          "reference": "Prayer niches (mihrabs)",
          "hypothesis": "People are the sweetest."
        },
        {
          "source": "حبهان وفلفل اسود وشويه ملح، هنرشهم عليها مع ورق لوري، وهنحطلها ليمونة كبيرة عشان لونها ما يغمقش - اهي ليمونة كبيرة.",
          "reference": "Cardamom, grains of paradise, cardamom, black pepper, and a little salt. We'll just sprinkle these on, with some bay leaves, and we'll add a big lemon so it doesn't darken — here's the big lemon.",
          "hypothesis": "They're big and black pepper, salt, salt, and salt, and we'll stop it with her big pastry because the color isn't just a bit of colors – yeah, a little big dish."
        },
        {
          "source": "يا عم الحاجات دي بتحصل، ساعات ليفربول بتخسر الماتش وساعات ريال مدريد بيكسب.",
          "reference": "Man, these things happen. Sometimes Liverpool loses the match, and other times Real Madrid wins it.",
          "hypothesis": "Hey man, these things happen, sometimes Liverpool matches and winning the match and Real Madrid win."
        },
        {
          "source": "انا هبقى كويسة، ما تقلقيش",
          "reference": "I will be fine, don't worry",
          "hypothesis": "I'll be good, don't worry"
        },
        {
          "source": "انا عايز فراخ مشوية وكفتة على الفحم وبيبسي.",
          "reference": "I want grilled chicken, kofta on charcoal, and Pepsi.",
          "hypothesis": "I want to take his boat and cut on the boat and fish."
        },
        {
          "source": "سنك",
          "reference": "Your age",
          "hypothesis": "You're"
        },
        {
          "source": "على فكره، النهارده الموضوع هيبقى interesting نشوف الفريقين دول هيتعاملوا مع النتيجه ازاي، وكل واحد هيلعب بطريقته. سواء كلوب هيحاول يدي أمل، حتى لو بنسبة ١٠٪، إننا نقدر نعمل المستحيل في مدريد قدام خصم تقيل جداً، أو لو لأ، يبقى على الأقل عندنا هدف واضح وصريح وواقعي عشان الموسم ما يضيعش مننا. الفوز هيخلي جمهور ليفربول يسكت تماماً مع يورجن كلوب ويديهم جرعة أمل لحد نهاية الموسم على الأقل. على عكس يونايتد اللي محتاج رد فعل سريع وواضح وصريح ابتداءً من اليوروبا ليج قدام ريال بيتيس. النتائج الصعبة والتاريخية دي بتفضل في الذاكرة مهما كان مركزك في الدوري – كلنا فاكرينها.",
          "reference": "By the way, today, it's interesting to see how these two teams will handle the result, each playing in their own way. Whether it's Klopp trying to give hope, even if it's just 10%, that we can achieve the impossible in Madrid against a very tough opponent, or, if not, we’ll at least have a clear, explicit, and realistic goal so the season doesn't slip away from us. A win would make all Liverpool fans completely quiet with Jurgen Klopp and give them an injection of hope until the end of the season, at least. Unlike United, who desperately need an automatic, clear, and decisive reaction starting from the Europa League against Real Betis. These tough, historic results stay in our memories regardless of your position in the league—we all remember them.",
          "hypothesis": "By the way, today it will be a clear to see these teams will beaten with the teams, and each one will play with his way. Whether Klopp will try to give him a hope, even if it's a match, we can make the expectations in Madrid's goal against a very clear, or if it's not, it's at least we can make the expectations in Madrid's goal and a very clear and because it's not worried about us. The winner will be finished with Liverpool's fans to be present with Jurgen Klopp and give them a match. By the winner, United's fans who need a final and affection, and expecting them to the European team. The important thing is and happened with the main points, and this results are knocking in the"
        },
        {
          "source": "يعني إحنا لازم ندفع هنا؟",
          "reference": "So, do we have to pay here?",
          "hypothesis": "So we have to pay here?"
        },
        {
          "source": "أظن إحنا هنعرف ده.",
          "reference": "I think we will know that.",
          "hypothesis": "I think we will know this."
        },
        {
          "source": "أوبشن لو سمحت، بعد إذنك، شكراً.",
          "reference": "Option please, excuse me, thank you.",
          "hypothesis": "Amgo, please, thank you. Thank you."
        },
        {
          "source": "ده اللي الناس بتقوله، معرفش.",
          "reference": "That's what people say, I don't know.",
          "hypothesis": "This is the one who says, I don't know."
        },
        {
          "source": "لا يا باشا، هو هينضف الليلة دي. ممكن ييجي لو فرنسا فشلت في البطولة دي. لا يا باشا، كانوا معاه لحد ما قال هو الكاس ده إيه؟ يعني ده مبابي، هيلعب في 2026. على الورق آه، بس لو خرج بدري زي دور الستاشر، الله أعلم. هو خرج من اليورو 2021، صح، بس لما ادوله فرصة يكمل، أثبت نفسه جامد.",
          "reference": "No sir, he's going to clean up this mess. He might come if France fails in this tournament. No sir, they supported him until he asked 'which cup is this?' I mean, this is Mbappe, he'll play in 2026. On paper, yes, but if he gets eliminated early, like in the round of 16, God knows. He was eliminated from Euro 2021, true, but when they gave him a chance to continue, he did really well.",
          "hypothesis": "No sir, he will clean this day. You can come, if France finished in this tournament. No, sir, they were with him until he said this is the cup? I mean, that's Mbappé, he'll play in 2026. By the paper, yes, but if he left early, just like the week, God knows. He's going out from the Euro 2021, right, but when he got a chance to get a chance, he got a chance."
        },
        {
          "source": "بص بقى، انا بسألهم يعربوا اللي تحتها خط، وبقول لهم البطل بيرفع الكاس، يعني 'البطل' هو المبتدأ. تقوم ملك، تخيلي، تقول لي: 'المبتدأ مرفوع بالكسر'! تخيلي! والله حصل كده.",
          "reference": "Let me tell you, I ask them to parse what's underlined, and I say, 'the champion raises the cup.' 'Champion' is the subject. Then, Malak (a student) says to me, 'the subject is marked with a kasra (wrong grammatical case)'—can you imagine? I swear that's what happened!",
          "hypothesis": "Look, I'm asking them they've been done for them, and I tell them the championship of the championship, so 'The championship' is a cup of championship. Do you get a girl, you say, 'What's going on?' I swear happened it.' Do you swear to me, 'I'm going to what's going on.'"
        },
        {
          "source": "هو ايه اصلا المعيار بتاعي؟ سيبك بقى من معاييره ومعايير الجوايز وكل الكلام ده.",
          "reference": "What's my standard anyway? Forget about his standards, the awards' standards, and all that stuff.",
          "hypothesis": "What's my friend's name? Let me tell you from him from him, and with the main talk."
        },
        {
          "source": "يا ريت أرجع صغير تاني لأيام ماكنتش شايل هم زي دلوقتي.",
          "reference": "I wish I could go back to being young, to the days when I didn't carry worries like I do now.",
          "hypothesis": "I wish I would bring you a small days when I didn't see them now."
        },
        {
          "source": "أنا سؤالي هو إيه الشغل اللي جوارديولا بيعمله مع ده ومع ده؟ هو نجح فين؟ في برشلونة نجح فعلاً مع الاتنين. يعني النجاح بس في ألمانيا؟ لا، أنا قصدي تقدّروا الراجل ده عمل ايه؟ الراجل ده تعب وعمل حاجه كبيرة.",
          "reference": "My question is, what kind of work is Guardiola doing with this one and that one? Where did he succeed? In Barcelona, he definitely succeeded with both. You can only succeed in Germany? No, I mean, can you appreciate what this man has done? This man worked hard and did something amazing.",
          "hypothesis": "I am my question, what's the great working what Guardiola does with this and with this? Where is he supposed to be? In Barcelona, he really got increase with both. So, the greatest team? No, I mean, you're just taking this man did? This man is taking a big great message."
        },
        {
          "source": "راجع نفسك يا عم هاري، انت خربت نادي توتنهام، شكلك كنت انت السبب. يمكن يكسبوا السنة دي بعد ما كين مشي ولا أي حاجة.",
          "reference": "Check yourself, Mr. Harry. You destroyed Tottenham Club—looks like you were the problem. They might win this year now that Kane is gone or whatever.",
          "hypothesis": "I'm sleeping yourself, man, you've been tried to Tottenham, you looked the team. Maybe they win this year after Klopp, nothing."
        },
        {
          "source": "يلا، هقوم أروح روح النغم وهكلمك في التليفون.",
          "reference": "Let's go, I'll get up, go to Rouh El Nagham, and call you on the phone.",
          "hypothesis": "Come on, I'll go to go to the next text and I'll talk to you in the phone."
        },
        {
          "source": "وهيخلي العيال يتعاملوا مع مرات أب شريرة.",
          "reference": "And he'll make the kids deal with a mean stepmother.",
          "hypothesis": "And when the kids keeps handleing with a long time."
        }
      ]
    }
  }
}