SuperCLUE最新评测:文心X1.1精确指令遵循国内第一

百度AI 2025-10-24 15:31
SuperCLUE最新评测:文心X1.1精确指令遵循国内第一图1

近日,中文精确指令遵循测评基准(SuperCLUE-CPIF)正式发布,文心X1.1以75.51分位居国产大模型第一,在任务类型、指令数量两类划分中均为国内榜首,文心X1.1在实际生产环境中应用具有显著优势。


本次测评涵盖 GPT-5(high)、DeepSeek-V3.2-Exp-Thinking、Claude-Sonnet-4.5-Reasoning、Gemini-2.5-Pro 等共10个国内外模型参与。基于实际生产环境特点,SuperCLUE-CPIF 重点评估大型语言模型(LLM)在中文环境下的精确遵循复杂、多约束指令能力,重点评估模型将自然语言指令转化为符合所有要求的具体输出的能力。测评结果显示,国产主流大模型中,文心X1.1以75.51分位居国产大模型第一,DeepSeek-V3.2-Exp-Thinking 和 Hunyuan-T1-20250822分别以73.98分和65.82分位居国内二、三。


SuperCLUE最新评测:文心X1.1精确指令遵循国内第一图2


文心大模型X1是基于文心大模型4.5训练而来的深度思考模型,升级后的 X1.1主要采用了迭代式混合强化学习训练框架,一方面通过混合强化学习,同时提升通用任务和智能体任务的效果;另一方面通过自蒸馏数据的迭代式生产及训练,不断提升模型整体效果。


据 WAVE SUMMIT 2025现场展示,文心大模型X1.1在处理复杂写作任务时,既能运用模型内化的知识、调用联网搜索工具等准确查找用户需要的知识,又能深度思考用户希望创意写作的立意和要求,最后输出事实准确,结构化、逻辑性强,并且文辞优美的内容。例如在更复杂的长程任务场景,文心大模型X1.1在面对共享单车平台不同等级用户,不同类型问题的处理流程,以及用户的不同情绪状态多元素叠加的问题时,能够严格遵循业务流程先后规划、再自主调用工具,并结合用户情绪,短时内解决了问题,服务过程完整主动。


作为国内最早投入大模型产研的企业,百度依托“芯片-框架-模型-应用”的全栈自研体系,持续推动文心大模型能力进化。得益于飞桨文心的联合优化,文心大模型的能力拓展和效率提升。据早前公开报道,相比文心大模型X1,文心X1.1的事实性提升34.8%,指令遵循提升12.5%,智能体提升9.6%。


SuperCLUE最新评测:文心X1.1精确指令遵循国内第一图3


声明:内容取材于网络,仅代表作者观点,如有内容违规问题,请联系处理。 
more
从 Advanced RAG 到 Agentic RAG:智能化检索增强生成应用实战
历史性时刻!Anthropic估值暴涨破万亿美元,首次超越OpenAI
Physical Intelligence发布π0.7模型,具身智能迈出通用化关键一步
特斯拉中国车机将接入豆包,零跑高管回应直播导航界面出现bug,小米17开始推送miclaw,曝微软Xbox将裁员15%,这就是今天的其他大新闻!
Anthropic产品负责人辞任Figma董事,市场担忧AI巨头冲击SaaS生态
让离线强化学习从「局部描摹」变「全局布局」丨ICLR'26
反超OpenAI,Anthropic暴买TPU
1万亿美元!Anthropic估值暴涨,反超OpenAI
揭秘!AI数据中心需要多少SiC、GaN、IGBT?
微软正测试将类OpenClaw功能整合进Microsoft 365 Copilot,聚焦企业级安全与持续任务执行能力
Copyright © 2025 成都区角科技有限公司
蜀ICP备2025143415号-1
  
川公网安备51015602001305号