eval_bidirectional.json

{
  "eval_size": 3000,
  "seed": 42,
  "generation": {
    "do_sample": false,
    "repetition_penalty": 1.0,
    "no_repeat_ngram_size": 0
  },
  "directions": {
    "en2egy": {
      "bleu": 0.8284798113158242,
      "chrf": 13.151559692353024,
      "samples": [
        {
          "source": "So what should I get you? Should I get you this or that? Just imagine the scene: sitting now, wearing a sleeveless undershirt, eating the best piece of meat you'll ever have in your life.",
          "reference": "طب أجيب لك إيه؟ أجيب لك دي ولا دي؟ تخيل كده المنظر، قاعد دلوقتي لابس فانلة بحمالات وبتاكل أحلى حتة لحمة ممكن تكلها في حياتك.",
          "hypothesis": "يعني إيه؟ إيه ده؟ إيه ده؟ أنا مش هينفع، هقولك على حاجة، هقولك على حاجة، أنا مش هينفع."
        },
        {
          "source": "Prayer niches (mihrabs)",
          "reference": "محاريب الصلاة",
          "hypothesis": "ممكن تيجي"
        },
        {
          "source": "Cardamom, grains of paradise, cardamom, black pepper, and a little salt. We'll just sprinkle these on, with some bay leaves, and we'll add a big lemon so it doesn't darken — here's the big lemon.",
          "reference": "حبهان وفلفل اسود وشويه ملح، هنرشهم عليها مع ورق لوري، وهنحطلها ليمونة كبيرة عشان لونها ما يغمقش - اهي ليمونة كبيرة.",
          "hypothesis": "يا جماعة، أيوه، كل سنة وانتوا مش هينفعوا، وبعدين ناكلوا، وبعدين ناكلوا، وبعدين ناكلوا. عايزوا نروحوا، عشان كده هتبقى زي ما هي."
        },
        {
          "source": "Man, these things happen. Sometimes Liverpool loses the match, and other times Real Madrid wins it.",
          "reference": "يا عم الحاجات دي بتحصل، ساعات ليفربول بتخسر الماتش وساعات ريال مدريد بيكسب.",
          "hypothesis": "يا جماعة، الناس بتقول إن في ماتش مانشستر سيتي، وده كان بيعملوا كده."
        },
        {
          "source": "I will be fine, don't worry",
          "reference": "انا هبقى كويسة، ما تقلقيش",
          "hypothesis": "أنا مش عارف، أنا مش هينفع"
        },
        {
          "source": "I want grilled chicken, kofta on charcoal, and Pepsi.",
          "reference": "انا عايز فراخ مشوية وكفتة على الفحم وبيبسي.",
          "hypothesis": "عايز أقولك على حاجة، وبعدين نروح."
        },
        {
          "source": "Your age",
          "reference": "سنك",
          "hypothesis": "ممكن"
        },
        {
          "source": "By the way, today, it's interesting to see how these two teams will handle the result, each playing in their own way. Whether it's Klopp trying to give hope, even if it's just 10%, that we can achieve the impossible in Madrid against a very tough opponent, or, if not, we’ll at least have a clear, explicit, and realistic goal so the season doesn't slip away from us. A win would make all Liverpool fans completely quiet with Jurgen Klopp and give them an injection of hope until the end of the season, at least. Unlike United, who desperately need an automatic, clear, and decisive reaction starting from the Europa League against Real Betis. These tough, historic results stay in our memories regardless of your position in the league—we all remember them.",
          "reference": "على فكره، النهارده الموضوع هيبقى interesting نشوف الفريقين دول هيتعاملوا مع النتيجه ازاي، وكل واحد هيلعب بطريقته. سواء كلوب هيحاول يدي أمل، حتى لو بنسبة ١٠٪، إننا نقدر نعمل المستحيل في مدريد قدام خصم تقيل جداً، أو لو لأ، يبقى على الأقل عندنا هدف واضح وصريح وواقعي عشان الموسم ما يضيعش مننا. الفوز هيخلي جمهور ليفربول يسكت تماماً مع يورجن كلوب ويديهم جرعة أمل لحد نهاية الموسم على الأقل. على عكس يونايتد اللي محتاج رد فعل سريع وواضح وصريح ابتداءً من اليوروبا ليج قدام ريال بيتيس. النتائج الصعبة والتاريخية دي بتفضل في الذاكرة مهما كان مركزك في الدوري – كلنا فاكرينها.",
          "hypothesis": "على فكرة، لو مش عارف لو كان في ماتش في الدوري، لو كان في ماتش في الدوري، لو كان في ماتش في الدوري، كان في ماتش في الدوري، أو في الدوري، أو في الدوري، أو في الدوري، أو في الدوري، أو في الدوري، أو في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان في الدوري، أو لو كان"
        },
        {
          "source": "So, do we have to pay here?",
          "reference": "يعني إحنا لازم ندفع هنا؟",
          "hypothesis": "يعني عايز أقولك على هنا؟"
        },
        {
          "source": "I think we will know that.",
          "reference": "أظن إحنا هنعرف ده.",
          "hypothesis": "أنا مش عارف إن ده مش هيحصل."
        },
        {
          "source": "Option please, excuse me, thank you.",
          "reference": "أوبشن لو سمحت، بعد إذنك، شكراً.",
          "hypothesis": "يا جماعة، أنا مش هقولك."
        },
        {
          "source": "That's what people say, I don't know.",
          "reference": "ده اللي الناس بتقوله، معرفش.",
          "hypothesis": "ده مش هيبقى بيقولوا إيه."
        },
        {
          "source": "No sir, he's going to clean up this mess. He might come if France fails in this tournament. No sir, they supported him until he asked 'which cup is this?' I mean, this is Mbappe, he'll play in 2026. On paper, yes, but if he gets eliminated early, like in the round of 16, God knows. He was eliminated from Euro 2021, true, but when they gave him a chance to continue, he did really well.",
          "reference": "لا يا باشا، هو هينضف الليلة دي. ممكن ييجي لو فرنسا فشلت في البطولة دي. لا يا باشا، كانوا معاه لحد ما قال هو الكاس ده إيه؟ يعني ده مبابي، هيلعب في 2026. على الورق آه، بس لو خرج بدري زي دور الستاشر، الله أعلم. هو خرج من اليورو 2021، صح، بس لما ادوله فرصة يكمل، أثبت نفسه جامد.",
          "hypothesis": "لا لا لا، هو كان بيقول إن في الآخر هيبقى في الدوري الإنجليزي. هو كان بيقول إن في ماتش في الدوري، بس هو كان بيقول إن في ماتش في الدوري، بس هو كان بيقول إن في ماتش في الدوري، بس هو كان بيقول إن في ماتش في الدوري، بس هو كان بيقول إن في ماتش في الدوري، بس هو كان بيقول إن في ماتش في الدوري، بس هو كان بيقول إن في الدوري الإنجليزي كان بيقول إن في الدوري الإنجليزي كان بيقول إن في الدوري الإنجليزي كان بيقول إن في الدوري الإنجليزي كان بيقول إن في الدوري الإنجليزي كان بيقول إن في الدوري الإنجليزي كان بيقول إن في الدوري الإنجليزي كان بيقول إن في الدوري الإنجليزي كان بيقول إن في الدوري الإنجليزي كان في الدوري الإنجليزي."
        },
        {
          "source": "Let me tell you, I ask them to parse what's underlined, and I say, 'the champion raises the cup.' 'Champion' is the subject. Then, Malak (a student) says to me, 'the subject is marked with a kasra (wrong grammatical case)'—can you imagine? I swear that's what happened!",
          "reference": "بص بقى، انا بسألهم يعربوا اللي تحتها خط، وبقول لهم البطل بيرفع الكاس، يعني 'البطل' هو المبتدأ. تقوم ملك، تخيلي، تقول لي: 'المبتدأ مرفوع بالكسر'! تخيلي! والله حصل كده.",
          "hypothesis": "بص، أنا مش هقولك على حاجة، أنا مش هقولك على حاجة. أنا مش هقولك على حاجة، أنا مش هقولك على حاجة. أنا مش هقولك على حاجة، أنا مش هقولك على حاجة."
        },
        {
          "source": "What's my standard anyway? Forget about his standards, the awards' standards, and all that stuff.",
          "reference": "هو ايه اصلا المعيار بتاعي؟ سيبك بقى من معاييره ومعايير الجوايز وكل الكلام ده.",
          "hypothesis": "إيه اللي بيحصل؟ أنا مش هينفع، بس في حد بيعمله."
        },
        {
          "source": "I wish I could go back to being young, to the days when I didn't carry worries like I do now.",
          "reference": "يا ريت أرجع صغير تاني لأيام ماكنتش شايل هم زي دلوقتي.",
          "hypothesis": "يا رب، أنا مش هقولك على حاجة، أنا مش هقولك على حاجة."
        },
        {
          "source": "My question is, what kind of work is Guardiola doing with this one and that one? Where did he succeed? In Barcelona, he definitely succeeded with both. You can only succeed in Germany? No, I mean, can you appreciate what this man has done? This man worked hard and did something amazing.",
          "reference": "أنا سؤالي هو إيه الشغل اللي جوارديولا بيعمله مع ده ومع ده؟ هو نجح فين؟ في برشلونة نجح فعلاً مع الاتنين. يعني النجاح بس في ألمانيا؟ لا، أنا قصدي تقدّروا الراجل ده عمل ايه؟ الراجل ده تعب وعمل حاجه كبيرة.",
          "hypothesis": "بص يا جماعة، إيه ده؟ إيه ده؟ في إيه؟ في إيه؟ في إيه؟ في إيه؟ في إيه في إيه؟ في إيه في إيه؟ في إيه في إيه؟ في إيه في إيه؟"
        },
        {
          "source": "Check yourself, Mr. Harry. You destroyed Tottenham Club—looks like you were the problem. They might win this year now that Kane is gone or whatever.",
          "reference": "راجع نفسك يا عم هاري، انت خربت نادي توتنهام، شكلك كنت انت السبب. يمكن يكسبوا السنة دي بعد ما كين مشي ولا أي حاجة.",
          "hypothesis": "يلا يا جماعة، أنا مش هقولك على حاجة. أنا مش هينفع، ده مش هيبقى في كل حاجة."
        },
        {
          "source": "Let's go, I'll get up, go to Rouh El Nagham, and call you on the phone.",
          "reference": "يلا، هقوم أروح روح النغم وهكلمك في التليفون.",
          "hypothesis": "يلا يا باشا، أنا مش هقولك، أنا مش هقولك."
        },
        {
          "source": "And he'll make the kids deal with a mean stepmother.",
          "reference": "وهيخلي العيال يتعاملوا مع مرات أب شريرة.",
          "hypothesis": "وبعدين هو اللي بيحصل في كل حتة."
        }
      ]
    },
    "egy2en": {
      "bleu": 1.8709159904583916,
      "chrf": 14.84143953330391,
      "samples": [
        {
          "source": "طب أجيب لك إيه؟ أجيب لك دي ولا دي؟ تخيل كده المنظر، قاعد دلوقتي لابس فانلة بحمالات وبتاكل أحلى حتة لحمة ممكن تكلها في حياتك.",
          "reference": "So what should I get you? Should I get you this or that? Just imagine the scene: sitting now, wearing a sleeveless undershirt, eating the best piece of meat you'll ever have in your life.",
          "hypothesis": "What's this? What's this, what's this? What's this, what's this, what's this? I'm telling you, what's this, and I'm telling you, what's this?"
        },
        {
          "source": "محاريب الصلاة",
          "reference": "Prayer niches (mihrabs)",
          "hypothesis": "And the situation is something"
        },
        {
          "source": "حبهان وفلفل اسود وشويه ملح، هنرشهم عليها مع ورق لوري، وهنحطلها ليمونة كبيرة عشان لونها ما يغمقش - اهي ليمونة كبيرة.",
          "reference": "Cardamom, grains of paradise, cardamom, black pepper, and a little salt. We'll just sprinkle these on, with some bay leaves, and we'll add a big lemon so it doesn't darken — here's the big lemon.",
          "hypothesis": "They're saying, and we'll take a bit, and you'll take a bit, and you'll take a bit, and you'll take a bit of a bit, and you'll take a bit of a bit."
        },
        {
          "source": "يا عم الحاجات دي بتحصل، ساعات ليفربول بتخسر الماتش وساعات ريال مدريد بيكسب.",
          "reference": "Man, these things happen. Sometimes Liverpool loses the match, and other times Real Madrid wins it.",
          "hypothesis": "Hey, this is the one who wouldn't take the match, and they're the one who wouldn't be a bit."
        },
        {
          "source": "انا هبقى كويسة، ما تقلقيش",
          "reference": "I will be fine, don't worry",
          "hypothesis": "I'm not sure, I'll tell you, I'll tell you, it's not a bit."
        },
        {
          "source": "انا عايز فراخ مشوية وكفتة على الفحم وبيبسي.",
          "reference": "I want grilled chicken, kofta on charcoal, and Pepsi.",
          "hypothesis": "I'm not sure you're not saying it's a bit."
        },
        {
          "source": "سنك",
          "reference": "Your age",
          "hypothesis": "He's something"
        },
        {
          "source": "على فكره، النهارده الموضوع هيبقى interesting نشوف الفريقين دول هيتعاملوا مع النتيجه ازاي، وكل واحد هيلعب بطريقته. سواء كلوب هيحاول يدي أمل، حتى لو بنسبة ١٠٪، إننا نقدر نعمل المستحيل في مدريد قدام خصم تقيل جداً، أو لو لأ، يبقى على الأقل عندنا هدف واضح وصريح وواقعي عشان الموسم ما يضيعش مننا. الفوز هيخلي جمهور ليفربول يسكت تماماً مع يورجن كلوب ويديهم جرعة أمل لحد نهاية الموسم على الأقل. على عكس يونايتد اللي محتاج رد فعل سريع وواضح وصريح ابتداءً من اليوروبا ليج قدام ريال بيتيس. النتائج الصعبة والتاريخية دي بتفضل في الذاكرة مهما كان مركزك في الدوري – كلنا فاكرينها.",
          "reference": "By the way, today, it's interesting to see how these two teams will handle the result, each playing in their own way. Whether it's Klopp trying to give hope, even if it's just 10%, that we can achieve the impossible in Madrid against a very tough opponent, or, if not, we’ll at least have a clear, explicit, and realistic goal so the season doesn't slip away from us. A win would make all Liverpool fans completely quiet with Jurgen Klopp and give them an injection of hope until the end of the season, at least. Unlike United, who desperately need an automatic, clear, and decisive reaction starting from the Europa League against Real Betis. These tough, historic results stay in our memories regardless of your position in the league—we all remember them.",
          "hypothesis": "The same thing is that they're not saying, 'We'll be a bit, and I'm not saying that they're saying, 'I'm not saying, 'I'm not saying, 'I'm not saying,' and I'm not saying, 'I'm not saying, 'I'm not saying,' and I'm not saying that they're saying they're saying they're saying they're saying they're saying they're saying they're saying they're saying they're saying they're saying they're saying they're saying they're saying they're saying they're saying they're saying they're saying they're saying they're saying they're saying they're saying the"
        },
        {
          "source": "يعني إحنا لازم ندفع هنا؟",
          "reference": "So, do we have to pay here?",
          "hypothesis": "So, what's this?"
        },
        {
          "source": "أظن إحنا هنعرف ده.",
          "reference": "I think we will know that.",
          "hypothesis": "I want to tell you, we're not saying."
        },
        {
          "source": "أوبشن لو سمحت، بعد إذنك، شكراً.",
          "reference": "Option please, excuse me, thank you.",
          "hypothesis": "And if you're not saying, I'm not saying, I'm not saying."
        },
        {
          "source": "ده اللي الناس بتقوله، معرفش.",
          "reference": "That's what people say, I don't know.",
          "hypothesis": "This is the one who wouldn't tell you."
        },
        {
          "source": "لا يا باشا، هو هينضف الليلة دي. ممكن ييجي لو فرنسا فشلت في البطولة دي. لا يا باشا، كانوا معاه لحد ما قال هو الكاس ده إيه؟ يعني ده مبابي، هيلعب في 2026. على الورق آه، بس لو خرج بدري زي دور الستاشر، الله أعلم. هو خرج من اليورو 2021، صح، بس لما ادوله فرصة يكمل، أثبت نفسه جامد.",
          "reference": "No sir, he's going to clean up this mess. He might come if France fails in this tournament. No sir, they supported him until he asked 'which cup is this?' I mean, this is Mbappe, he'll play in 2026. On paper, yes, but if he gets eliminated early, like in the round of 16, God knows. He was eliminated from Euro 2021, true, but when they gave him a chance to continue, he did really well.",
          "hypothesis": "No, they're not saying this is the one who would be a bit. What's this, what's this, what's this? If you want to tell you, it's not a bit, but it's not a bit. If you're not saying, 'I'm not saying, 'I'm not saying, 'I'm telling you, 'I'm telling you,' and I'm not saying this isn't a bit.'"
        },
        {
          "source": "بص بقى، انا بسألهم يعربوا اللي تحتها خط، وبقول لهم البطل بيرفع الكاس، يعني 'البطل' هو المبتدأ. تقوم ملك، تخيلي، تقول لي: 'المبتدأ مرفوع بالكسر'! تخيلي! والله حصل كده.",
          "reference": "Let me tell you, I ask them to parse what's underlined, and I say, 'the champion raises the cup.' 'Champion' is the subject. Then, Malak (a student) says to me, 'the subject is marked with a kasra (wrong grammatical case)'—can you imagine? I swear that's what happened!",
          "hypothesis": "Look, I'm telling you, I'll take them, and I'll tell you, it's not the same. I'm telling you, it's not something, and I'll take them to the match. So, I'm telling you, it's not a bit of a bit. So, what's they want to tell you, they're saying, 'I'll tell you, 'I'll tell you, 'I'll take it.'"
        },
        {
          "source": "هو ايه اصلا المعيار بتاعي؟ سيبك بقى من معاييره ومعايير الجوايز وكل الكلام ده.",
          "reference": "What's my standard anyway? Forget about his standards, the awards' standards, and all that stuff.",
          "hypothesis": "He's not the field? The match is the one who would be a bit, and they're not saying that's the field."
        },
        {
          "source": "يا ريت أرجع صغير تاني لأيام ماكنتش شايل هم زي دلوقتي.",
          "reference": "I wish I could go back to being young, to the days when I didn't carry worries like I do now.",
          "hypothesis": "Hey, I'm not saying that they're saying that they're saying it's a bit."
        },
        {
          "source": "أنا سؤالي هو إيه الشغل اللي جوارديولا بيعمله مع ده ومع ده؟ هو نجح فين؟ في برشلونة نجح فعلاً مع الاتنين. يعني النجاح بس في ألمانيا؟ لا، أنا قصدي تقدّروا الراجل ده عمل ايه؟ الراجل ده تعب وعمل حاجه كبيرة.",
          "reference": "My question is, what kind of work is Guardiola doing with this one and that one? Where did he succeed? In Barcelona, he definitely succeeded with both. You can only succeed in Germany? No, I mean, can you appreciate what this man has done? This man worked hard and did something amazing.",
          "hypothesis": "I'm not saying this is the one who would be a bit, and what's they want to tell you? What's this? What's this, I'm saying this is the one who would be a bit. What's this? What's this, I'm not saying this is the first time, okay? I'm not saying it's a bit, okay?"
        },
        {
          "source": "راجع نفسك يا عم هاري، انت خربت نادي توتنهام، شكلك كنت انت السبب. يمكن يكسبوا السنة دي بعد ما كين مشي ولا أي حاجة.",
          "reference": "Check yourself, Mr. Harry. You destroyed Tottenham Club—looks like you were the problem. They might win this year now that Kane is gone or whatever.",
          "hypothesis": "I want to tell you, you're the one who would be a bit, you're not saying it's a bit. They're not saying that you're not saying it's a bit."
        },
        {
          "source": "يلا، هقوم أروح روح النغم وهكلمك في التليفون.",
          "reference": "Let's go, I'll get up, go to Rouh El Nagham, and call you on the phone.",
          "hypothesis": "Come on, I'll take the same too, and I'll take the moment and see them."
        },
        {
          "source": "وهيخلي العيال يتعاملوا مع مرات أب شريرة.",
          "reference": "And he'll make the kids deal with a mean stepmother.",
          "hypothesis": "What's they want to tell you, they're saying they're saying."
        }
      ]
    }
  }
}