群发资讯网

FMF给AI越狱风险分级 AI防护被绕过以后,风险不该只用成功或失败来判断。

FMF给AI越狱风险分级
AI防护被绕过以后,风险不该只用成功或失败来判断。

据FMF官方公告,其发布了网络威胁越狱评级框架1.0;OpenAI原帖确认参与了这项合作。

它关注的是绕过防护后到底多出什么能力、这些能力有多容易被使用,帮助团队决定先修哪些问题。

1️⃣ 能力:同时考察能力增益和影响范围。

2️⃣ 使用:评估相关能力部署的容易程度。

3️⃣ 发现:考虑越狱被发现的容易程度。

这意味着安全团队可能更容易比较不同发现,而不是把所有越狱当成同一级别。框架仍属初始版本,评分一致性和实际风险对应关系还要继续验证。

共同的评级语言,是安排防护优先级的起点,不是安全保证。AI安全 网络安全