OpenCompass Hub

SmartBench

SmartBench 是首个面向智能手机终端大模型能力评估的基准，基于手机厂商提供的功能将其划分为五类共20项任务，涵盖文本摘要、问答、信息抽取、内容创作和通知管理等场景。它提供高质量数据集与定制化评估标准，旨在推动终端大模型在移动应用中的标准化评估与发展。