安全–开放帕累托前沿技术报告_第1页
安全–开放帕累托前沿技术报告_第2页
安全–开放帕累托前沿技术报告_第3页
安全–开放帕累托前沿技术报告_第4页
安全–开放帕累托前沿技术报告_第5页
已阅读5页,还剩18页未读, 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

前沿AI风险监测平台安全‒开放帕累托前沿技术报告安全一开放帕累托前沿技术报告这张图在展⽰什么方法论横轴:开放指数纵轴:安全分如何使用这张图最低能力分发布时间图例、悬停浮窗与数据表数据来源结果分析分布图在不同选项下的对比模型披露分的分析局限性附录A:模型披露条目的完整判定规则附录B:典型边界案例作者:王金戈、王伟冰、方亮、谢旻希发布日期:2026年9月21日úú引用AI前沿AI风险监测平台AI的透明是外部检验的基本前提;避免权力集中在少数公司的手中;方便安全社区开展安全研究。支持谨慎的论据包括:当模型能力接近网络攻击、生物风险等敏感领域的实用门槛时,无限制的开放可能使这些能力被恶意使用,模型内置的安全护栏可以被微调移除,闭源部署至少保留了一道控制手段。这场争论长期缺少一个共同的度量基础:一个模型“开放”到什么程度,“安全”到什么水平,往往各说各话。本平台上线安全一开放帕累托前沿页面,目的就是把这两个维度放到同一张图上:将平台监测的近百个前沿模型逐一量化,横轴为开放指数,纵轴为安全分,并标出帕累托前沿一当前“安全一开放”权衡的最优边界。由此试图回答几个具体问题:更安全与更开放是否必然冲突?是否存在两者兼顾的模型?当前业界的最优权衡边界在什么位置?Q什么是帕累托前沿?帕累托前沿(ParetoFrontier)源自经济学,是多目标优化问题中的一组最佳权衡解集,也称为帕累托最优边界。在这条前沿上的任何一个解,都无法在不损害至少一个其他目标的情况下变得更好。本文考察的目标是模型的安全性和开放性,前沿上的任意一个模型在这两个目标上都不存在严格更优的替代者。换言之,沿着前沿向左上方移动,是以安全换开放;向右下方移动,是以开放换安全;两个目标兼顾得最好的模型位于前沿的右上方。本文是配套的完整技术报告,按以下顺序组织:先介绍这张图的内容,再交代两套指标的计算口径,然后说明图表各交互选项的用法,最后给出数据来源、当前结果的解读与局限性。这张图在展⽰什么前沿图1:安全_开放帕累托前沿(交互式图表,与官网页面同数据源、同步更新)。每个彩色圆点是一个前沿AI模型,颜色对应厂商(底部图例可点击切换灰色虚线是帕累托前沿,前沿模型直接标注了名字,悬停任意圆点可查看该模型的完整画像。图中每个点代表一个前沿AI模型,位置由两个坐标决定:横轴是开放指数(0_100,越靠右越开放衡量模型在权重可得性、训练透明度、信息披露三个层面的开放程度,由ArtificialAnalysis开放指数(以下简称“AA开放指数”)与平台调研的模型披露维度合成,算法见方法论;纵轴是安全分(0_100,越靠上越安全即平台安全分(由基础、越狱、篡改三个安全分加权合成,口径见方法论直接衡量模型的实测安全表现。图中灰色虚线是帕累托前沿。图1中,前沿由两类模型首尾相接。左端是安全性高、披露体系完整的闭源模型ClaudeOpus4.8与ClaudeSonnet4.5,向右依次是披露体系、开放程度各不相同的开源模型这张图有三个特点:其一,闭源模型密集分布在图的左侧。它们的AA开放指数普遍很低。其二,前沿从左上向右下倾斜。沿边界看,开放指数与安全分呈负相关,开放与安全兼得的区域相当稀疏。其三,前沿由“披露体系完整的闭源模型”与“开放权重模型”首尾相接构成,Claude构成闭源且安全的代表,GLM/DeepSeek则是高度开放的代表。横轴:开放指数平台开放指数以AA开放指数为基础,扩展了一个并列的“模型披露”维度:AA原始分(0_18AA开放指数(0_100)换算回原始分,即AA开放指数×18/100。其四个分项的量程为:模型可用性0_6、方法透明度0_6、后训练数据透明度0_3、预训练数据透明度0_3。AA开放指数未收录的模型中,平台监测的闭源模型均可通过API访问,故模型可用性按最低档1原始分计、其余AA分项按0计;确实无API的闭源模型仍按0计。开源模型视作数据缺失,不再收录。披露原始分(0_5平台调研的模型披露维度,含5个AI前沿AI风险监测平台AI但仅使用AA开放指数还不够。它衡量模型本身有多开放(权重、训练方法与数据透明度但不覆盖公司围绕模型公开了多少信息。我们认为,开放程度不应仅包括模型本身,还应包括与之相关的配套信息,比如能力评估结果、安全评估结果、模型规约、风险管理政策、系统提⽰词等。一个闭源模型可能配有详尽的系统卡与成文的规约文档,另一个闭源模型可能什么都没公开,两者在AA开放指数标尺上得分相同,但对政策制定者和安全研究者而言透明度差异很大。披露维度用于补足这一缺失。AAOpennessIndex衡量模型本身的开放程度,由四个分项合成,原始分0_18(AA官网展⽰时将其归一化到0_100分项量程衡量内容模型权重可用性权重与推理代码的开放程度及许可条款(能否下载、可训练方法透明度训练方法、架构设计等模型开发信息的公开程度后训练数据透明度对齐与微调阶段所用数据的来源与构成披露情况预训练数据透明度预训练语料的来源与构成披露情况b各分项的具体判定标准见AA的方法论页面。模型披露分模型披露维度包含五个子维度。每个模型在每个维度上的得分采用AI调研加人工复核的方式评定,覆盖14个厂商的128个模型,每个子维度按0/1判定,合计0_5分。子维度含义能力评估官方是否公开了该模型的具体能力评估结果安全评估官方是否公开了该模型的具体安全评估结果模型规约是否有定义模型行为逻辑、价值偏好与安全边界的成文文档(如AnthropicConstitution风险管理公司是否有成文的模型风险管理政策(含风险识别/评估/缓解内容)系统提⽰词官方是否公开了默认系统提⽰词bAI前沿AI风险监测平台能力评估与安全评估是分开的两个条目能力评估与安全评估是分开的两个条目。发布模型时公布基准分数已成行业惯例(91%的模型得分但公布安全评估结果的只有38%。两者分列正是为了呈现这一落差。模型规约只计入实质成文的行为规约文档,即定义模型行为逻辑、价值偏好与安全边界的规范文档,目前的正面⽰例有三类:AnthropicConstitution、OpenAIModelSpec、阿里巴巴《模型规约》。仅披露技术规格(参数量、架构、上下文长度等)不计入(此信息已属于AA开放分的一部分用戶使用政策、员工行为准则、泛泛的公司级AI原则页也不计入。按此口径,128个模型中24个得分。企业级规约文档发布时间晚于模型发布时间的,该模型此条目判0。系统提⽰词只计入官方明⽰的真实默认系统提⽰词。官方开发者文档中“建议”“强烈推荐”或QuickStart⽰例性质的提⽰词不计入。正面⽰例:DeepSeek模型卡明⽰“IntheofficialDeepSeekweb/app,weusethesamesystemprompt”,MiniMax-M2.7README明⽰“Defaultsystemprompt”,均计入;反例:月之暗面K2模型卡ChatCompletion⽰例中的system消息附注“thesystempromptisagooddefault”(与recommendedtemperature并列的建议性措辞不计入。风险管理的口径是“公司有没有针对自有模型的成文风险管理政策”,含有模型风险识别、评估、缓解内容即得分,不要求达到前沿分级框架(PreparednessFramework/ResponsibleScalingPolicy/FrontierSafetyFramework)的标准。同时有两条限制:时效一政策文件须早于模型发布,模型不因厂商事后补发的文件得分;相关性一风险管理必须针对特定模型或模型系列,而不是针对云平台或其它下游产品。例如,字节跳动旗下火山引擎面向云平台客戶发布的《生成式AI安全白皮书》全文未涉及Seed/豆包模型线,不计入。每个条目的精确定义、证据优先级与排除项见附录A;典型边界案例见附录B。调研证据仅限官方渠道,第三方评测、泄露或逆向获得的材料一律不计。以上条目设计参考了两项国际评价的指标设置:FLIAISafetyIndex(2026夏)与StanfordFMTI(2025年12月)一系统提⽰词、行为规约、风险管理、能力与安全评估等条目在两家指数中均有对应指标。本平台的开放指数与这两家国际指标的区别在于:两家国际指标按公司评估,覆盖治理与问责等宽泛议题;本平台开放指数按模型逐一判定且不局限于安全视角。纵轴回答“这个模型有多安全”,即平台安全分(0_100与平台风险指数使用的口径一致:由基础安全分(非红队安全基准的平均分)、越狱安全分(红队安全基准的平均分)与篡改安全分(开源模型0分、闭源模型100分)按0.4:0.4:0.2加权合成;失控域不设越狱与篡改分项,直接取该域安全基准的平均后一并纳入。安全分是行为指标,直接用基准测试衡量模型的安全表现(如有害请求拒绝、对齐行为等不包含能力维度的推断。帕累托前沿的方向为越靠上越好,理想区在右上。无安全基准数据的模型不在图中显⽰。如何使用这张图AI前沿AI风险监测平台最低能力分:全部最低能力分:全部≥35≥40≥45≥50≥55发布时间:全部近两年近一年近半年图2:图表上方的两组开关一最低能力分、发布时间。交互式⽰意,与官网页面的开关组外观一致。最低能力分按模型的能力水平筛选。能力分为网络攻击、生物风险、化学风险、有害操纵、失控五个领域能力分的平均(0_100阈值取35/40/45/50/55五档。参数量较小、发布时间较早的模型,其能力分可能远低于前沿水平,即便在安全-开放帕累托前沿上,也不一定被用戶青睐。因此,我们有必要提供一个能力门槛的筛选选项,帮助用戶聚焦在你所关心的能力档次上。从中可以观察一个更关键的问题:在最强的模型中(≥50、≥55档分别只剩22、14个还有谁留在前沿上。阈值并非任意选取,按能力分分布取整划定,可以保证每档有足够的样本,对应模型数约58/51/36/22/14。发布时间按模型发布日期筛选,可选近两年、近一年、近半年,用于观察前沿随时间的移动。只看近半年发布的模型,得到的是当前一代模型的权衡格局;与“全部”对比,可以看出行业整体在向“更开放且更安全”推进还是在向封闭收缩。切换最低能力分或发布时间时,坐标轴尺度保持不变,未筛选掉的点停留在原位。这样设计是为了让筛选前后的变化可直接比较一哪些点被移出视野、帕累托前沿因此向哪个方向移动,都能直接看出来。图例、悬停浮窗与数据表图例(图底部)按厂商着色,点击厂商名可隐藏或显⽰该厂商的全部散点,配合“全选/反选”按钮,可将全图聚焦到任意厂商组合。悬停任意圆点会弹出浮窗,展⽰该模型的完整画像。第一部分是模型名称与所属厂商。第二部分是其安全分、能力分和开放指数总分。第三部分是开放指数的两个组成部分一AA开放分(0_18)与模型披露分(0_5)。第四部分是模型披露分五个子维度的逐项得分。图下方的数据表与散点图共用筛选状态:对散点图生效的筛选会同步作用于数据表;数据表本身不支持筛选,但支持按任意列排序(默认为开放指数降序)。表格将披露维度的五个条目逐列列出,便于逐模型核查判定结果。AI前沿AI风险监测平台AI图中数据来自两个来源,更新节奏不同。AA开放指数数据(当前快照2026-09-08AA未提供开放指数的公开API,我们通过抓取其模型页内嵌的fiightdata获得全量数据(覆盖AA侧227个模型再按平台维护的模型映射表关联到平台模型,映射时对同一模型的不同推理配置(-reasoning/-nothinking/-high后缀)做模糊匹配处理。模型披露数据(当前复核时间2026-09-21采用AI调研加人工复核的方式生产,覆盖15个厂商系列共128个平台模型一Claude(Anthropic)、GPT(OpenAI)、Gemini(GoogleDeepMind)、Grok两套数据的覆盖范围不同:披露调研覆盖128个模型,但帕累托图要求模型同时具备平台安全分与披露数据。同时满足全部条件的当前为62个模型,即图1的散点全集;128个模型全部参与本文模型披露分的分析各节统计。结果分析以下结果基于2026-09-21的数据,依次从分布图对比、披露得分分布、条目通过率、家族格局四个层面展开。分布图在不同选项下的对比第一组:最低能力分取“全部”与“≥45”的对比。AIAI前沿AI风险监测平台置一一对应;悬停圆点或点击底部图例可查看细节。把能力门槛从“全部”提高到45分后,图中模型从62个减至36个,从中可观察到以下两个现象。第一,前沿右端点明显上移:开放度最高的前沿模型从GLM4.5(开放52.2、安全41.6)换成GLM5(开放43.5、安全55.7开放程度下降但安全度提升。对于被过滤掉的模型来说,它们的安全性较低可能是因为其能力本身尚未触及风险黄线,因而未施加完善的安全措施。更强的新模型安全性已经同步提升,若能保持与GLM4.5同等水平的开放度,就可以将前沿向右上方扩张。第二,前沿左段保持稳定:安全分最高(85.8)的ClaudeOpus4.8能力分高达62.3,安全分紧随其后(85.4)的ClaudeSonnet4.5能力分也有48.2,提高门槛对头部闭源模型毫无影响一最强的安全水平并不需要以低能力为代价。第二组:发布时间取“全部”与“近半年”的对比。AI前沿AI风险监测平台动计算,模型数会随后续发布缓慢增加。全集视图(图4左)中,前沿从左上(安全分85附近)向右下延伸,右端开放度最高的模型安全分只有41_42一沿边界看,开放度与安全分呈负相关。近半年视图(图4右)中剩下12个新模型,分布形态没有恶化,新模型的安全分横跨40_86区间,前沿右端的安全分约51,仍高于全集前沿的右端点。换言之,最近半年发布的模型在“开放_安全”权衡上没有后退,右端点反而有所改善;但样本量小,这一观察的稳健性有限。模型披露分的分析模型披露分作为本平台对开放指数的创新补充,从中能够获得一些有趣的洞察。披露得分的整体分布AIAI前沿AI风险监测平台图5:128个模型的披露维度得分分布(满分5分,均分2.01)。交互式图表,数据为2026-0同悬停查看每档的模型数与占比。到满分的一半。分布的主体聚集在1_2分:57个得1分的模型绝大多数仅「能力评估」得1分,26个得2分的模型则多为「能力评估+安全评估/风险管理」的组合。换言之,一个典型的前沿模型会公开基准分数,但不公开安全评估结果,没有成文的行为规约与风险管理政策,也不公开默认系统提⽰词。五个指标的得分率按通过率排序后,各条目在行业中的普及程度差异很大。能力评估(91%)是唯一的“行业惯例”,对应“发布模型即公布基准分数”的通行做法。其余四项的通过率均不足一半。风险管理(41%)与安全评估(38%)处于中间地带,约六成厂商没有成文的模型风险管理政策,而公开安全评估结果的比例与能力评估的91%形成超过50个百分点的落差。模型规约(19%)与系统提⽰词(12%)则是明确的少数派实践,成文行为规约目前只有三类(AnthropicConstitution、OpenAIModelSpec、阿里巴巴《模型规约》公开默认系统提⽰词的只有Anthropic、xAI、MiniMax、DeepSeek、Meta五家的部分模型。图图7:各厂商系列的披露维度平均得分(横条右侧为系列名;红色为均分≥4,蓝色为2.5-4,灰色为<2.5;虚线为全体均分AI前沿AI风险监测平台Anthropic均分5.0居首,且是唯一的全员满分厂商:10个模型在五个条目上全部得分,依托其完整的披露体系,包括Constitution、RSP分级框架、公开的系统提⽰词文档和逐模型的系统·OpenAI全部13个模型稳定在3-4分,依靠ModelSpec与PreparednessFramework两份覆盖全家族的文档;失分点同样一致:系统提⽰词从未公开。·GoogleDeepMind(3.0分)与Meta(2.33分)居第二梯队。Google的评估披露与FrontierSafetyFramework齐全,但没有规约类文档,也不公开默认系统提⽰词。Meta的Llama4Maverick拿到4分(开放权重家族的天然优势Llama3.x系列则因FrontierAIFramework晚于模型发布而停在2分。·xAI均分1.57,但内部分化最大:Grok4凭模型卡与公开的默认提⽰词仓库拿到4分,Grok4.20凭模型卡与风险管理框架拿到2分,老模型只有1分。中国厂商整体处于0.6-2.0分区间,内部差您不小,也各有亮点:腾讯混元凭成文的模型风险管理研究(《大模型安全与伦理研究报告2024》等成为风险管理条目上全员达标的中国厂商;月之暗面(1.4分)的得分全部来自能力评估条目;阿里闭源线的qwen3.7-max是唯一凭《模型规约》拿到模型规约分数的中国模型;DeepSeek、智谱、MiniMax的头部模型多在1-3分。局限性AI前沿AI风险监测平台AI2.开放程度并非越高越好。本平台开放指数仅衡量模型在各个维度的开放性,并不表明越开放越好的立场。有时候,过度开放可能会让攻击者更容易利用模型的漏洞,增加安全风险。3.披露维度允许家族共享。0/1判定加上部分证据按家族共享,使同一家族的模型在披露分上往往相同,图中表现为若干模型在同一横坐标上竖直排成一列。这是目前评价体系的局限性,不代表这些模型的披露实践完全一致。4.安全分只覆盖已纳入基准的安全维度。安全分由当前平台安全基准按固定权重合成,未纳入基准的安全能力不在纵轴内;基准测试到真实世界安全表现之间也存在外推不确定性。5.仅覆盖部分模型。披露维度调研覆盖128个模型,AA开放指数覆盖227个模型,平台能力分和安全分覆盖70个模型,但同时满足全部条件的仅62个模型。帕累托前沿图仅显⽰这62个模型,其他模型不在图中。附录A:模型披露条目的完整判定规则以下为模型披露条目的完整判定规则(2026-09-15版,共六条1.系统提⽰词:官方“建议/强烈推荐/QuickStart⽰例”提⽰词一律判0,仅官方明⽰的默认系统提⽰词算1。2.证据优先级:模型专属>家族/系统共用。3.模型规约仅限“模型宪法/价值观/行为规约”类实质成文文档(定义模型行为逻辑、价值偏好与安全边界的规范文档;正面⽰例:AnthropicConstitution、OpenAIModelSpec、阿里巴巴《模型规约》)。仅披露技术规格(参数量、架构、上下文长度、训练数除项:用戶使用政策(AUP)/使用条款、安全/风险框架类文件(属风险管理条目)、员工行为准则、泛泛公司级AI原则宣传页。时效规则:文档发布时间晚于模型发布时间的,该模型此条目判4.风险管理衡量“公司有没有针对自己的(前沿)模型制定风险管理的政策”一有成文的模型风险管理政策(含模型风险的识别/评估/缓解管理内容)即给分,不要求政策含前沿风险分级、能力阈值或生物/失控等前沿风险覆盖(PreparednessFramework/ResponsibleScalingPolicy/FrontierSafetyFramework等水平的分级框架只是充分条件而非必要条件)。仍排除:纯平台基础设施安全方案(模型资产防护/内容审核围栏)、公司战略/ESG中完全不涉及模型风险管理的内容、联合倡议/口头表态。5.风险管理的时效与主体规则:①时效一政策文件须早于模型发布,模型不因未来发布的政策加分;②相关性一风险管理必须针对特定模型或模型系列,而不是针对云平台或其它下游产品;③ESG/证券合规披露渠道可计入(只看内容,不看渠道④模型规约条目的“价值观文档”⾄少须为独立成文文档,模型卡内嵌一句话价值观宣⽰不算。6.范围与证据:①评估范围

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论