AI玩具正迎来严监管。
近日,国家网信办等五部门联合公布《人工智能拟人化互动服务管理暂行办法》(以下简称“办法”),明确规定:不得向未成年人提供虚拟亲属、虚拟伴侣等虚拟亲密关系的服务;向不满十四周岁未成年人提供其他拟人化互动服务的,应当取得未成年人的父母或者其他监护人的同意。办法自2026年7月15日起施行。
办法还明确了针对未成年使用者的具体保护措施:拟人化互动服务提供者应当建立未成年人模式,提供未成年人模式切换、定期现实提醒、使用时长限制等个性化安全设置选项;针对不同年龄段未成年人保护需要,支持监护人接收安全风险提醒、了解未成年人服务使用概况、屏蔽特定角色、限制充值消费等。简而言之,办法要求拟人化互动服务提供者必须设置防沉迷“红线”功能和家长阅知机制。
记者近日分别调研上海玩具市场和线上AI玩具销售商发现,绝大多数面向未成年人的AI玩具未设置有效的防沉迷管控方式和家长阅知功能。一方面,市面上多数AI玩具没有使用时长限制功能,部分玩具内嵌的大模型可能会有提醒使用时间过长等“软性”通知。另一方面,多数AI玩具不具备家长阅知功能,即家长在不全程在场的情况下无法了解安全风险、未成年人服务使用情况等,部分AI玩具有用户日志等功能供家长查阅。
多数AI玩具暂无防沉迷等设置
在上海杨浦的一家大型玩具店,工作人员向记者介绍了较为畅销的AI玩具“贝贝”。该产品约巴掌大,外形类似猫头,拥有尾巴唤醒功能,可以实现流畅对话、情感识别交互升温、自主记忆、娱乐互动等,适合三岁以上儿童。不过,该产品没有使用时长限制设置,且家长无法远程查看儿童使用时长等情况。
记者找到该产品在电商平台的旗舰店,客服亦表示:这款产品没有防沉迷功能,家长无法在线上查看孩子的使用情况。
另一家玩具店的主推款AI玩具标识为“养成系AI”,拥有长期记忆、外语启蒙、科普故事等功能,适用年龄为三岁或三岁以上。该产品的线上和线下门店销售客服均表示,没有防沉迷提示、使用时间限制、家长阅知等功能。
在一家中高端的线上AI玩具旗舰店,销售客服推荐了最新上线的新款AI玩具。该款小熊外形的玩具适用年龄为三岁或三岁以上,并配备了“成长守护日志”功能,家长可以查阅每日使用情况、每月统计报告等数据;同时,该玩具也有防沉迷管控等功能,能够提前对允许使用时间段、使用时长进行设置。
在另一家价格偏高的AI玩具旗舰店,客服推荐了今年3月上市的兔头外形拟人AI玩具。该玩具亦配备了“成长记录”,家长可以在手机小程序查阅孩子和AI玩具的对话记录、使用时间等。不过,该店客服明确表示:AI玩具目前不需要设置防沉迷。
专家:企业应提升算法设计透明度
近年来,人工智能应用不断普及,许多AI产品抓住未成年人对情感关怀的需求,推出各类 “有求必应” 的虚拟伙伴,以此获得流量与商业收益。这类产品虽提供积极的情感陪伴,却易使未成年人沉溺虚拟社交、挤占学习时间,不仅影响自我认知与现实交往能力,还可能导致其日后难以应对现实困境。在此背景下,针对AI陪伴类产品的监管举措和政策正持续加强。
知名商业顾问、亚太社会创新研究院院长霍虹屹在接受证券时报记者采访时表示,AI玩具的监管亟待一套专门、分层的监管体系,可以概括为三大层次。一是内容安全的底线监管。AI大模型的输出具有不可预测性,若没有经过针对儿童场景的专门训练和过滤,就可能输出不适宜的内容。建议监管层强制要求儿童AI产品进行专项内容安全测评和备案,建立类似食品安全的准入制,不通过测评不得上市。
二是数据隐私的强制保护。霍虹屹表示,AI玩具在和孩子互动的过程中,会采集大量的语音、行为、情感数据。可以参照欧盟的通用数据保护条例儿童专项条款,明确儿童数据不得用于商业画像、不得向第三方出售、家长有权随时申请删除。
霍虹屹还强调了算法推荐的透明度要求。“AI玩具的算法,会不会为了提升用户黏性而刻意设计上瘾机制?会不会用情感操控的方式增加孩子的依赖?监管层应当要求企业公开算法设计原则,明确禁止以最大化使用时长为优化目标的算法逻辑。这类似于对未成年人游戏防沉迷系统的要求,但需要更精细化。”他表示。
值得注意的是,办法也提到:拟人化互动服务提供者应当具备用户隐私权和个人信息保护、过度依赖风险预警、情感边界引导、心理健康保护等安全能力,不得将替代社会交往、控制用户心理、诱导沉迷依赖等作为服务目标。
除了对未成年使用者的保护措施外,办法还对所有用户“防沉迷”提出要求:拟人化互动服务提供者发现用户出现过度依赖、沉迷倾向的,应当以弹窗等显著方式动态提醒用户互动内容为人工智能服务生成;对用户连续使用拟人化互动服务每超过2个小时的,应当以对话或者弹窗等方式提醒用户注意使用时长。
责编:叶舒筠
校对:杨舒欣