AI EVALUATION, IN CONTEXT.BY EQUALITY MACHINE

LLM Stats

VideoMME w sub.

The first-ever comprehensive evaluation benchmark of Multi-modal LLMs in Video analysis. Features 900 videos (254 hours) with 2,700 question-answer pairs covering 6 primary visual domains and 30 subfields. Evaluates temporal understanding across short (11 seconds) to long (1 hour) videos with multi-modal inputs including video frames, subtitles, and audio.

评测信息与证据

来源
LLM Stats
发布者
未收录
评测发布日期
未收录
采集日期
2026-08-17
模态
multimodal

本站保留来源报告的结果,不代表独立复测。请先核对任务版本、评测协议、分数单位和报告日期;不同运行条件不能直接合并为统一排名。

原始资料

报告成绩 10

按来源中的观察顺序展示,顺序不代表排名。日期保留原始精度。

模型数值单位协议报告日期与口径来源
Qwen3.8 Max0.904未收录未收录2026-08-02 · model_announcementLLM Stats
Qwen3.6-27B0.877未收录未收录2026-04-21 · model_announcementLLM Stats
Qwen3.5-122B-A10B0.873未收录未收录2026-02-24 · model_announcementLLM Stats
Qwen3.5-27B0.87未收录未收录2026-02-24 · model_announcementLLM Stats
GPT-50.867未收录未收录2025-08-07 · model_announcementLLM Stats
Qwen3.6-35B-A3B0.866未收录未收录2026-04-16 · model_announcementLLM Stats
Qwen3.5-35B-A3B0.866未收录未收录2026-02-24 · model_announcementLLM Stats
Qwen2.5 VL 32B Instruct0.779未收录未收录2025-02-28 · model_announcementLLM Stats
Qwen2.5-Omni-7B0.724未收录未收录2025-03-27 · model_announcementLLM Stats
Qwen2.5 VL 7B Instruct0.716未收录未收录2025-01-26 · model_announcementLLM Stats