{
  "results": [
    {
      "Benchmark": "MMLU-Pro",
      "SmolLM2 correct": "4/50",
      "SmolLM2 %": 8.0,
      "FlyFFN-v2 correct": "5/50",
      "FlyFFN-v2 %": 10.0,
      "\u0394 FlyFFN": 2.0
    },
    {
      "Benchmark": "PIQA",
      "SmolLM2 correct": "21/50",
      "SmolLM2 %": 42.0,
      "FlyFFN-v2 correct": "25/50",
      "FlyFFN-v2 %": 50.0,
      "\u0394 FlyFFN": 8.0
    },
    {
      "Benchmark": "MMMLU-DE",
      "SmolLM2 correct": "12/50",
      "SmolLM2 %": 24.0,
      "FlyFFN-v2 correct": "16/50",
      "FlyFFN-v2 %": 32.0,
      "\u0394 FlyFFN": 8.0
    }
  ],
  "macro": {
    "SmolLM2": 24.666666666666668,
    "FlyFFN-v2": 30.666666666666668,
    "delta": 6.0
  }
}