人工智能基础设施领域两项评测基准发布
#行业资讯 ·2026-07-06 16:27:04
科技日报讯 (记者李均)记者7月3日从上海无问芯穹智能科技股份有限公司(以下简称“无问芯穹”)了解到,中国信息通信研究院日前正式发布AISHPerf人工智能软硬件基准体系3.0版本,包含两项AI Infra(人工智能基础设施)领域核心评测基准——AISHPerf-智算运维智能体评测基准及AISHPerf-算子生成智能体评测基准。无问芯穹作为重点技术支持方参与了两项评测基准的构建。
据了解,AISHPerf-智算运维智能体评测基准是首个面向AI Infra的运维智能体评测基准。它以无问芯穹沉淀的近百亿条真实运维数据为底座,经资深运维专家脱敏并精细标注和严格筛选,最终抽象提炼出103条高保真、高质量的典型评测用例。同时,它构建起覆盖五大技术栈、44种问题现象、22个细分故障领域、3种难度层级、6种国内外芯片的立体化科学评测体系。
国产芯片在硬件架构、驱动体系、通信协议及框架适配等层面技术差异显著,导致运维复杂度高、难度大。对此,该基准特别纳入了天数、壁仞、沐曦、摩尔、昇腾5种国产芯片集群运维的特定场景及典型问题测例,首次为国产智算运维智能体建立起统一、可量化的评估标尺。
AISHPerf-智算运维智能体评测基准的推出,不仅标志着我国在智算集群运维智能体领域拥有了首个权威评测体系,更率先将国产芯片集群运维场景纳入评测体系、填补了国产智算运维智能体评测领域的空白,为构建自主自治的新一代“词元工厂”提供了运维领域的技术方向与标准指引。
AISHPerf-算子生成智能体评测基准则跳出“模型能否生成可运行GPU算子”的基础维度,将评测重心锚定在“模型生成的算子能否在真实量化推理部署中替代现有算子”的工程可部署性上,更贴合产业实际落地需求。
未来,中国信息通信研究院与无问芯穹、清华大学等将深化产学研协同,迭代优化AISHPerf-智算运维智能体评测基准,不断扩充场景覆盖维度、丰富数据集规模、提升评测结果的可靠性与权威性,推动其成为行业公认的AI集群运维智能体能力评估公共基线,牵引全行业优质运维智能体的技术迭代与规模化落地。
京公网安备11010502060212号