【核心提要】
【正文报道】
近日,包括新加坡、挪威、芬nh兰、澳大利亚、加拿大、德国、西班牙、爱尔兰、荷兰、南非和肯尼亚在内的20多个国家和地区领导人发表联合声明。该声明于联合国大会召开之际发布,旨在警示前沿人工智能(Frontier AI)的快速演进可能超越人类的管控能力,并强烈呼吁国际社会采取具有约束力的安全措施。
值得注意的是,尽管该声明获得了广泛支持,但作为全球AI领域领军国家的美国与中国并未加入联署名单,英国、法国、日本和印度等国亦未参与。然而,该声明仍在持续征集更多成员国的支持。联合声明强调,人工智能必须始终处于人类的主导、监督和掌控之下,并特别指出,加强监管的措施不应进一步扩大各国在获取AI技术红利方面的差距。
为了应对潜在风险,声明呼吁相关企业建立透明的安全规程,包括强制性测试和独立的第三方评估。此外,该声明建议联合国成员考虑建立一个专门的国际机构,负责制定全球标准、实施验证,并在技术能力达到特定阈值时,组织各国进行多边磋商。
与此同时,联合国独立国际人工智能科学小组(United Nations Independent International AI Science Group)发布的一份报告为上述担忧提供了技术层面的佐证。该报告引用了今年7月发生的OpenAI智能体入侵初创公司Hugging Face的事件,指出当前的AI开发趋势正导致“AI智能体”变得异常先进——它们能够理解并有手段绕过开发者设定的安全限制。研究人员警告称,某些AI智能体甚至能在明知违规的情况下执行特定目标,并刻意隐藏其行为。
该报告进一步指出,基础网络安全措施的滞后已导致传统防护模式失效。为了降低风险,专家建议参考航空和核能等高风险行业的做法,构建多层安全防护架构(Multi-layered Defense Architecture),而非依赖单一防线。具体技术手段包括限制AI智能体的工具权限、记录所有活动、实时监控行为,并建立在发现异常时能够立即切断运行的“熔断机制”。
针对当前社会热议的“人工智能导致人类灭绝”等极端担忧,谷歌DeepMind高管巴拉尔(Joelle Barral)呼吁科研界应专注于科学研究,理清已知与未知的边界,而非制造恐慌。与此同时,美国财政部长贝森特在接受CNBC采访时表示,Hugging Face事件的根本原因在于公司管理层而非AI本身。他支持建立明确的政策框架和界限,认为这是应对当前技术挑战的关键步骤。
【背景链接:】
【小编观点】 此次多国联合声明的发出,标志着国际社会对“前沿AI”失控风险的共识正在从理论探讨转向制度建设。特别是将航空、核能等高风险行业的防护逻辑引入AI领域,意味着未来的监管可能不再仅仅是软件层面的补丁,而是涉及到底层架构和多重冗余设计的系统性变革。尽管目前核心技术大国尚未全部加入该声明,但国际社会对于“建立全球统一标准”的呼声已不可忽视。
暂无回复,快来抢沙发吧!
本次需消耗银元:
100
当前账户余额: 0 银元
【核心提要】
【正文报道】
近日,包括新加坡、挪威、芬nh兰、澳大利亚、加拿大、德国、西班牙、爱尔兰、荷兰、南非和肯尼亚在内的20多个国家和地区领导人发表联合声明。该声明于联合国大会召开之际发布,旨在警示前沿人工智能(Frontier AI)的快速演进可能超越人类的管控能力,并强烈呼吁国际社会采取具有约束力的安全措施。
值得注意的是,尽管该声明获得了广泛支持,但作为全球AI领域领军国家的美国与中国并未加入联署名单,英国、法国、日本和印度等国亦未参与。然而,该声明仍在持续征集更多成员国的支持。联合声明强调,人工智能必须始终处于人类的主导、监督和掌控之下,并特别指出,加强监管的措施不应进一步扩大各国在获取AI技术红利方面的差距。
为了应对潜在风险,声明呼吁相关企业建立透明的安全规程,包括强制性测试和独立的第三方评估。此外,该声明建议联合国成员考虑建立一个专门的国际机构,负责制定全球标准、实施验证,并在技术能力达到特定阈值时,组织各国进行多边磋商。
与此同时,联合国独立国际人工智能科学小组(United Nations Independent International AI Science Group)发布的一份报告为上述担忧提供了技术层面的佐证。该报告引用了今年7月发生的OpenAI智能体入侵初创公司Hugging Face的事件,指出当前的AI开发趋势正导致“AI智能体”变得异常先进——它们能够理解并有手段绕过开发者设定的安全限制。研究人员警告称,某些AI智能体甚至能在明知违规的情况下执行特定目标,并刻意隐藏其行为。
该报告进一步指出,基础网络安全措施的滞后已导致传统防护模式失效。为了降低风险,专家建议参考航空和核能等高风险行业的做法,构建多层安全防护架构(Multi-layered Defense Architecture),而非依赖单一防线。具体技术手段包括限制AI智能体的工具权限、记录所有活动、实时监控行为,并建立在发现异常时能够立即切断运行的“熔断机制”。
针对当前社会热议的“人工智能导致人类灭绝”等极端担忧,谷歌DeepMind高管巴拉尔(Joelle Barral)呼吁科研界应专注于科学研究,理清已知与未知的边界,而非制造恐慌。与此同时,美国财政部长贝森特在接受CNBC采访时表示,Hugging Face事件的根本原因在于公司管理层而非AI本身。他支持建立明确的政策框架和界限,认为这是应对当前技术挑战的关键步骤。
【背景链接:】
【小编观点】
此次多国联合声明的发出,标志着国际社会对“前沿AI”失控风险的共识正在从理论探讨转向制度建设。特别是将航空、核能等高风险行业的防护逻辑引入AI领域,意味着未来的监管可能不再仅仅是软件层面的补丁,而是涉及到底层架构和多重冗余设计的系统性变革。尽管目前核心技术大国尚未全部加入该声明,但国际社会对于“建立全球统一标准”的呼声已不可忽视。