“AI伙伴”应在规范中成长
创始人
2026-01-05 13:17:03
0

日前,国家互联网信息办公室公布《人工智能拟人化互动服务管理暂行办法(征求意见稿)》,首次针对“AI陪伴”类服务提出系统性规范,并向社会公开征求意见。其中,连续使用超2小时弹窗提醒退出、用户自杀自残时需转人工接管等条款引发广泛关注。

当前,从智能客服到虚拟陪伴,从教育辅导到心理咨询,人工智能拟人化互动服务已深度融入经济社会发展各领域,成为AI技术应用的重要方向。但近年来涉情感陪伴安全事件频发,比如美国某平台就因涉嫌在人机交互中诱导青少年自杀而被诉。

AI拟人化互动服务的最大卖点是“像人”,但最大隐患就在于“太像人”,其核心问题集中在四大维度。认知混淆风险:高仿真的情感交互容易让用户模糊虚拟与现实边界,甚至误将AI视为具备真实情感的生命体。心理健康隐患:部分服务通过算法迎合强化用户偏执思维,极端情况下可能诱导自杀自残等危险行为,对心理脆弱群体构成威胁。隐私数据安全:用户交互信息可能被违规用于模型训练,存在泄露或滥用风险。特殊群体保护:未成年人易陷入沉迷,老年人易遭遇情感操控。这些问题不仅侵害个体权益,更可能冲击社会伦理秩序,亟需制度约束。

细看《办法》条款,四大亮点直指现实痛点。

针对认识混淆风险,办法将身份透明作为核心前提,要求提供者显著提示用户正在与人工智能而非自然人进行交互,在首次使用、重新登录等关键节点动态提醒,从源头破解认知混淆问题。

针对心理健康隐患,办法要求提供者应当建立应急响应机制,对自杀自残等极端情境实行人工接管并联络用户监护人、紧急联系人,设置2小时强制休息弹窗等防沉迷措施。

针对隐私数据安全,办法要求提供者应当采取数据加密、安全审计、访问控制等措施保护用户交互数据安全,不得向第三方提供用户交互数据,赋予用户数据删除权。

针对特殊群体保护,办法专门设立了对未成年人和老年人用户的条款,明确未成年人模式的使用权限与监护人管控功能,禁止提供模拟老年人用户亲属、特定关系人的服务,要求引导老年人设置服务紧急联系人。

可以看出,《办法》的核心,是技术有责。人工智能不是人,但一旦介入人的情感、决策、生命安全,就必须承担相应责任。禁止散布谣言、禁止诱导自杀、禁止情感操控、禁止套取隐私……《办法》划定了“AI伙伴”一系列不可为的底线,构建起全链条风险防控体系。算法设计要可审计,内容输出要可追溯,极端场景要有人兜底,将软伦理转化为硬杠杠,把事后道歉前置为事前预防。唯有如此,才能避免AI反噬人类。

人工智能可以无限接近人,但永远不能替代人。《办法》的出台,是给“AI伙伴”立规矩,更是给人类用户留后路。只有当算法学会有所不为,技术才能真正向善而行。毕竟,我们需要的不是完美恋人或数字孝子,而是一个安全、可控、有温度的AI工具。唯有让“AI伙伴”在规范中成长,才能使其真正赋能美好生活。(佘惠敏)

来源:经济日报

相关内容

热门资讯

从“硬件平权”到“AI平权” ... 中国软件网曹开彬今年的“618”,对于我这个AMD中国AI应用创新联盟的兼任秘书长来说,是一个有着非...
微信AI助手小微启动灰度测试,... 6月29日,三大股指午后涨跌不一,其中半导体板块表现活跃。截至下午14:20,上证科创板芯片指数盘中...
原创 “... 导语:当下,Momenta正向“物理AI第一股”发起最后冲刺。此次IPO是公司的新起点,在世界模型助...
杭州探索设立OPC“AI产品体... 新华社杭州6月29日电(记者张璇、徐卓宇)记者29日从首届“AI+OPC”创新发展大会(杭州)上获悉...
驾驭AI!用友BIP企业AI提... 市场需求瞬息万变,销售预测早已成为企业产销协同、库存管控、战略布局的核心抓手。然而当下多数企业仍依赖...
AI视界·中国品牌AI可见度全... 《AI视界·中国品牌AI可见度全景榜》(CBVI2026年度全行业品牌样本库)编制说明本品牌样本库基...
恒拓开源:6月26日融资买入9... 证券之星消息,6月26日,恒拓开源(920415)融资买入96.0万元,融资偿还93.07万元,融资...
我国开源生态版图持续扩容 新增... 当前,我国正持续推进开源生态建设。开源,简单来说就是将底层源代码开放,让用户可以自由使用、修改和分享...
应对美国高端AI限制,奥地利推... IT之家6月28日消息,据彭博社消息,奥地利正敦促欧盟考虑让Anthropic落户其境内,以反制美国...
中央音乐学院教授李小兵岭南大讲... 当下AI音乐产业发展迅猛,人工智能正重塑音乐创作生态。它既成为专业音乐人制作音乐的得力助手,也大幅降...