{
  "source": "https://doolykim22-keti-leaderboard.hf.space/api/results",
  "captured_at": "2026-09-17T06:05:24+00:00",
  "datasets": [
    "일반 상식",
    "멀티 모달",
    "수치 정보",
    "팩트 체크",
    "소버린 벤치마크",
    "K-Prism (Text, Intact)",
    "K-Prism (Text, Perturbed)",
    "K-Prism (Image, Intact)",
    "K-Prism (Image, Perturbed)"
  ],
  "models": [
    {
      "provider": "Alibaba Cloud",
      "name": "qwen3-30b",
      "repo": "Qwen/Qwen3-30B-A3B-Thinking-2507",
      "is_multimodal": false,
      "status": "completed",
      "updated_at": "2026-06-26T06:07:08Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 49.22
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 43.33
        },
        {
          "dataset_name": "특수 도메인",
          "metric_type": "raw",
          "score": 100.0
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 62.14
        }
      ]
    },
    {
      "provider": "Alibaba Cloud",
      "name": "qwen3-32b",
      "repo": "Qwen/Qwen3-32B",
      "is_multimodal": false,
      "status": "completed",
      "updated_at": "2026-06-26T07:06:54Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 38.86
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 42.38
        },
        {
          "dataset_name": "특수 도메인",
          "metric_type": "raw",
          "score": 100.0
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 58.64
        }
      ]
    },
    {
      "provider": "Alibaba Cloud",
      "name": "qwen3-4b",
      "repo": "Qwen/Qwen3-4B-Thinking-2507",
      "is_multimodal": false,
      "status": "completed",
      "updated_at": "2026-06-26T07:22:21Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 38.86
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 34.76
        },
        {
          "dataset_name": "특수 도메인",
          "metric_type": "raw",
          "score": 100.0
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 36.32
        }
      ]
    },
    {
      "provider": "Alibaba Cloud",
      "name": "qwen3-8b",
      "repo": "Qwen/Qwen3-8B",
      "is_multimodal": false,
      "status": "completed",
      "updated_at": "2026-06-26T07:38:00Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 10.36
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 33.81
        },
        {
          "dataset_name": "특수 도메인",
          "metric_type": "raw",
          "score": 50.0
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 26.91
        }
      ]
    },
    {
      "provider": "Alibaba Cloud",
      "name": "qwen3-vl-4b",
      "repo": "Qwen/Qwen3-VL-4B-Thinking",
      "is_multimodal": true,
      "status": "completed",
      "updated_at": "2026-06-26T07:49:35Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 25.91
        },
        {
          "dataset_name": "멀티 모달",
          "metric_type": "raw",
          "score": 28.21
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 19.52
        },
        {
          "dataset_name": "팩트 체크",
          "metric_type": "raw",
          "score": 68.57
        },
        {
          "dataset_name": "K-Prism (Text, Intact)",
          "metric_type": "raw",
          "score": 60.32
        },
        {
          "dataset_name": "K-Prism (Text, Perturbed)",
          "metric_type": "raw",
          "score": 54.37
        },
        {
          "dataset_name": "K-Prism (Image, Intact)",
          "metric_type": "raw",
          "score": 89.16
        },
        {
          "dataset_name": "K-Prism (Image, Perturbed)",
          "metric_type": "raw",
          "score": 23.49
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 20.35
        }
      ]
    },
    {
      "provider": "Alibaba Cloud",
      "name": "qwen3-vl-8b",
      "repo": "Qwen/Qwen3-VL-8B-Instruct",
      "is_multimodal": true,
      "status": "completed",
      "updated_at": "2026-06-26T08:15:48Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 1.55
        },
        {
          "dataset_name": "멀티 모달",
          "metric_type": "raw",
          "score": 41.07
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 37.62
        },
        {
          "dataset_name": "팩트 체크",
          "metric_type": "raw",
          "score": 71.43
        },
        {
          "dataset_name": "K-Prism (Text, Intact)",
          "metric_type": "raw",
          "score": 61.31
        },
        {
          "dataset_name": "K-Prism (Text, Perturbed)",
          "metric_type": "raw",
          "score": 61.31
        },
        {
          "dataset_name": "K-Prism (Image, Intact)",
          "metric_type": "raw",
          "score": 80.32
        },
        {
          "dataset_name": "K-Prism (Image, Perturbed)",
          "metric_type": "raw",
          "score": 21.69
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 3.94
        }
      ]
    },
    {
      "provider": "Alibaba Cloud",
      "name": "qwen3-vl-30b",
      "repo": "Qwen/Qwen3-VL-30B-A3B-Thinking",
      "is_multimodal": true,
      "status": "completed",
      "updated_at": "2026-06-29T00:55:39Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 34.72
        },
        {
          "dataset_name": "멀티 모달",
          "metric_type": "raw",
          "score": 42.14
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 46.19
        },
        {
          "dataset_name": "팩트 체크",
          "metric_type": "raw",
          "score": 78.57
        },
        {
          "dataset_name": "K-Prism (Text, Intact)",
          "metric_type": "raw",
          "score": 62.9
        },
        {
          "dataset_name": "K-Prism (Text, Perturbed)",
          "metric_type": "raw",
          "score": 58.33
        },
        {
          "dataset_name": "K-Prism (Image, Intact)",
          "metric_type": "raw",
          "score": 82.33
        },
        {
          "dataset_name": "K-Prism (Image, Perturbed)",
          "metric_type": "raw",
          "score": 28.92
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 49.89
        }
      ]
    },
    {
      "provider": "Alibaba Cloud",
      "name": "qwen3-vl-32b",
      "repo": "Qwen/Qwen3-VL-32B-Thinking",
      "is_multimodal": true,
      "status": "completed",
      "updated_at": "2026-06-29T02:00:53Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 23.83
        },
        {
          "dataset_name": "멀티 모달",
          "metric_type": "raw",
          "score": 45.36
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 44.29
        },
        {
          "dataset_name": "팩트 체크",
          "metric_type": "raw",
          "score": 82.86
        },
        {
          "dataset_name": "K-Prism (Text, Intact)",
          "metric_type": "raw",
          "score": 63.89
        },
        {
          "dataset_name": "K-Prism (Text, Perturbed)",
          "metric_type": "raw",
          "score": 60.32
        },
        {
          "dataset_name": "K-Prism (Image, Intact)",
          "metric_type": "raw",
          "score": 69.68
        },
        {
          "dataset_name": "K-Prism (Image, Perturbed)",
          "metric_type": "raw",
          "score": 28.11
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 22.54
        }
      ]
    },
    {
      "provider": "Kakao",
      "name": "kanana1.5",
      "repo": "kakaocorp/kanana-1.5-v-3b-instruct",
      "is_multimodal": true,
      "status": "completed",
      "updated_at": "2026-06-29T02:07:21Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 49.22
        },
        {
          "dataset_name": "멀티 모달",
          "metric_type": "raw",
          "score": 23.93
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 35.24
        },
        {
          "dataset_name": "팩트 체크",
          "metric_type": "raw",
          "score": 58.57
        },
        {
          "dataset_name": "특수 도메인",
          "metric_type": "raw",
          "score": 100.0
        },
        {
          "dataset_name": "K-Prism (Text, Intact)",
          "metric_type": "raw",
          "score": 8.33
        },
        {
          "dataset_name": "K-Prism (Text, Perturbed)",
          "metric_type": "raw",
          "score": 59.52
        },
        {
          "dataset_name": "K-Prism (Image, Intact)",
          "metric_type": "raw",
          "score": 85.34
        },
        {
          "dataset_name": "K-Prism (Image, Perturbed)",
          "metric_type": "raw",
          "score": 12.85
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 39.82
        }
      ]
    },
    {
      "provider": "Shanghai AI Laboratory (OpenGVLab)",
      "name": "InternVL3-8B",
      "repo": "OpenGVLab/InternVL3-8B",
      "is_multimodal": true,
      "status": "completed",
      "updated_at": "2026-06-29T02:19:52Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 43.01
        },
        {
          "dataset_name": "멀티 모달",
          "metric_type": "raw",
          "score": 22.86
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 43.81
        },
        {
          "dataset_name": "팩트 체크",
          "metric_type": "raw",
          "score": 64.29
        },
        {
          "dataset_name": "특수 도메인",
          "metric_type": "raw",
          "score": 100.0
        },
        {
          "dataset_name": "K-Prism (Text, Intact)",
          "metric_type": "raw",
          "score": 60.52
        },
        {
          "dataset_name": "K-Prism (Text, Perturbed)",
          "metric_type": "raw",
          "score": 59.72
        },
        {
          "dataset_name": "K-Prism (Image, Intact)",
          "metric_type": "raw",
          "score": 66.67
        },
        {
          "dataset_name": "K-Prism (Image, Perturbed)",
          "metric_type": "raw",
          "score": 39.76
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 42.67
        }
      ]
    },
    {
      "provider": "NCSOFT",
      "name": "varco",
      "repo": "NCSOFT/VARCO-VISION-2.0-1.7B",
      "is_multimodal": true,
      "status": "completed",
      "updated_at": "2026-06-29T05:03:10Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 16.06
        },
        {
          "dataset_name": "멀티 모달",
          "metric_type": "raw",
          "score": 31.43
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 9.52
        },
        {
          "dataset_name": "팩트 체크",
          "metric_type": "raw",
          "score": 58.57
        },
        {
          "dataset_name": "특수 도메인",
          "metric_type": "raw",
          "score": 100.0
        },
        {
          "dataset_name": "K-Prism (Text, Intact)",
          "metric_type": "raw",
          "score": 56.94
        },
        {
          "dataset_name": "K-Prism (Text, Perturbed)",
          "metric_type": "raw",
          "score": 55.16
        },
        {
          "dataset_name": "K-Prism (Image, Intact)",
          "metric_type": "raw",
          "score": 79.32
        },
        {
          "dataset_name": "K-Prism (Image, Perturbed)",
          "metric_type": "raw",
          "score": 44.58
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 31.51
        }
      ]
    },
    {
      "provider": "SK Telecom",
      "name": "ax4.0",
      "repo": "skt/A.X-4.0-VL-Light",
      "is_multimodal": true,
      "status": "completed",
      "updated_at": "2026-06-29T05:31:35Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 20.73
        },
        {
          "dataset_name": "멀티 모달",
          "metric_type": "raw",
          "score": 38.21
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 36.67
        },
        {
          "dataset_name": "팩트 체크",
          "metric_type": "raw",
          "score": 74.29
        },
        {
          "dataset_name": "특수 도메인",
          "metric_type": "raw",
          "score": 100.0
        },
        {
          "dataset_name": "K-Prism (Text, Intact)",
          "metric_type": "raw",
          "score": 61.51
        },
        {
          "dataset_name": "K-Prism (Text, Perturbed)",
          "metric_type": "raw",
          "score": 61.51
        },
        {
          "dataset_name": "K-Prism (Image, Intact)",
          "metric_type": "raw",
          "score": 84.14
        },
        {
          "dataset_name": "K-Prism (Image, Perturbed)",
          "metric_type": "raw",
          "score": 8.63
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 30.85
        }
      ]
    },
    {
      "provider": "NAVER Cloud",
      "name": "clova3b",
      "repo": "naver-hyperclovax/HyperCLOVAX-SEED-Vision-Instruct-3B",
      "is_multimodal": true,
      "status": "completed",
      "updated_at": "2026-06-29T05:44:09Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 15.03
        },
        {
          "dataset_name": "멀티 모달",
          "metric_type": "raw",
          "score": 26.43
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 38.57
        },
        {
          "dataset_name": "팩트 체크",
          "metric_type": "raw",
          "score": 67.14
        },
        {
          "dataset_name": "특수 도메인",
          "metric_type": "raw",
          "score": 100.0
        },
        {
          "dataset_name": "K-Prism (Text, Intact)",
          "metric_type": "raw",
          "score": 8.33
        },
        {
          "dataset_name": "K-Prism (Text, Perturbed)",
          "metric_type": "raw",
          "score": 74.8
        },
        {
          "dataset_name": "K-Prism (Image, Intact)",
          "metric_type": "raw",
          "score": 67.07
        },
        {
          "dataset_name": "K-Prism (Image, Perturbed)",
          "metric_type": "raw",
          "score": 63.05
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 13.13
        }
      ]
    },
    {
      "provider": "OpenAI",
      "name": "gpt-oss-20b",
      "repo": "openai/gpt-oss-20b",
      "is_multimodal": false,
      "status": "completed",
      "updated_at": "2026-06-29T06:09:40Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 25.39
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 38.1
        },
        {
          "dataset_name": "특수 도메인",
          "metric_type": "raw",
          "score": 100.0
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 15.1
        }
      ]
    },
    {
      "provider": "Shanghai AI Laboratory (OpenGVLab)",
      "name": "InternVL3-9B",
      "repo": "OpenGVLab/InternVL3-9B",
      "is_multimodal": true,
      "status": "completed",
      "updated_at": "2026-06-29T06:16:28Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 41.97
        },
        {
          "dataset_name": "멀티 모달",
          "metric_type": "raw",
          "score": 29.64
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 39.52
        },
        {
          "dataset_name": "K-Prism (Text, Intact)",
          "metric_type": "raw",
          "score": 57.74
        },
        {
          "dataset_name": "K-Prism (Text, Perturbed)",
          "metric_type": "raw",
          "score": 57.34
        },
        {
          "dataset_name": "K-Prism (Image, Intact)",
          "metric_type": "raw",
          "score": 81.12
        },
        {
          "dataset_name": "K-Prism (Image, Perturbed)",
          "metric_type": "raw",
          "score": 29.92
        },
        {
          "dataset_name": "팩트 체크",
          "metric_type": "raw",
          "score": 67.14
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 38.07
        }
      ]
    },
    {
      "provider": "Shanghai AI Laboratory (OpenGVLab)",
      "name": "InternVL3-14B",
      "repo": "OpenGVLab/InternVL3-14B",
      "is_multimodal": true,
      "status": "completed",
      "updated_at": "2026-06-29T06:37:45Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 52.85
        },
        {
          "dataset_name": "멀티 모달",
          "metric_type": "raw",
          "score": 29.29
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 38.1
        },
        {
          "dataset_name": "팩트 체크",
          "metric_type": "raw",
          "score": 71.43
        },
        {
          "dataset_name": "K-Prism (Text, Intact)",
          "metric_type": "raw",
          "score": 61.31
        },
        {
          "dataset_name": "K-Prism (Text, Perturbed)",
          "metric_type": "raw",
          "score": 66.47
        },
        {
          "dataset_name": "K-Prism (Image, Intact)",
          "metric_type": "raw",
          "score": 78.51
        },
        {
          "dataset_name": "K-Prism (Image, Perturbed)",
          "metric_type": "raw",
          "score": 27.31
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 47.26
        }
      ]
    },
    {
      "provider": "Shanghai AI Laboratory (OpenGVLab)",
      "name": "InternVL3-38B",
      "repo": "OpenGVLab/InternVL3-38B",
      "is_multimodal": true,
      "status": "completed",
      "updated_at": "2026-06-29T06:58:18Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 56.99
        },
        {
          "dataset_name": "멀티 모달",
          "metric_type": "raw",
          "score": 30.36
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 46.67
        },
        {
          "dataset_name": "팩트 체크",
          "metric_type": "raw",
          "score": 75.71
        },
        {
          "dataset_name": "K-Prism (Text, Intact)",
          "metric_type": "raw",
          "score": 61.11
        },
        {
          "dataset_name": "K-Prism (Text, Perturbed)",
          "metric_type": "raw",
          "score": 59.92
        },
        {
          "dataset_name": "K-Prism (Image, Intact)",
          "metric_type": "raw",
          "score": 78.11
        },
        {
          "dataset_name": "K-Prism (Image, Perturbed)",
          "metric_type": "raw",
          "score": 39.96
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 56.89
        }
      ]
    },
    {
      "provider": "Shanghai AI Laboratory (OpenGVLab)",
      "name": "InternVL3-8B-Pretrained",
      "repo": "OpenGVLab/InternVL3-8B-Pretrained",
      "is_multimodal": true,
      "status": "completed",
      "updated_at": "2026-06-29T07:04:44Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 41.45
        },
        {
          "dataset_name": "멀티 모달",
          "metric_type": "raw",
          "score": 17.5
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 42.86
        },
        {
          "dataset_name": "팩트 체크",
          "metric_type": "raw",
          "score": 60.0
        },
        {
          "dataset_name": "K-Prism (Text, Intact)",
          "metric_type": "raw",
          "score": 58.33
        },
        {
          "dataset_name": "K-Prism (Text, Perturbed)",
          "metric_type": "raw",
          "score": 57.14
        },
        {
          "dataset_name": "K-Prism (Image, Intact)",
          "metric_type": "raw",
          "score": 65.46
        },
        {
          "dataset_name": "K-Prism (Image, Perturbed)",
          "metric_type": "raw",
          "score": 47.59
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 45.95
        }
      ]
    },
    {
      "provider": "Shanghai AI Laboratory (OpenGVLab)",
      "name": "InternVL3-14B-Pretrained",
      "repo": "OpenGVLab/InternVL3-14B-Pretrained",
      "is_multimodal": true,
      "status": "completed",
      "updated_at": "2026-06-29T07:12:43Z",
      "scores": [
        {
          "dataset_name": "일반 상식",
          "metric_type": "raw",
          "score": 54.4
        },
        {
          "dataset_name": "멀티 모달",
          "metric_type": "raw",
          "score": 25.71
        },
        {
          "dataset_name": "수치 정보",
          "metric_type": "raw",
          "score": 42.38
        },
        {
          "dataset_name": "팩트 체크",
          "metric_type": "raw",
          "score": 70.0
        },
        {
          "dataset_name": "K-Prism (Text, Intact)",
          "metric_type": "raw",
          "score": 63.1
        },
        {
          "dataset_name": "K-Prism (Text, Perturbed)",
          "metric_type": "raw",
          "score": 72.22
        },
        {
          "dataset_name": "K-Prism (Image, Intact)",
          "metric_type": "raw",
          "score": 78.11
        },
        {
          "dataset_name": "K-Prism (Image, Perturbed)",
          "metric_type": "raw",
          "score": 54.02
        },
        {
          "dataset_name": "소버린 벤치마크",
          "metric_type": "raw",
          "score": 50.33
        }
      ]
    }
  ]
}