新浪新闻

Character.AI主动下架未成年服务,是科技巨头应对监管的无奈妥协还是责任觉醒?

BigNews

关注

Character.AI于2025年末主动下架未成年人开放式聊天服务,这一举措既是应对多重监管压力的必要妥协,也是行业责任意识觉醒的标志性事件,折射出AI伦理与商业扩张的深层矛盾。

一、直接动因:监管与法律风险的双重挤压

诉讼与监管重压

Character.AI因多起青少年自杀事件面临集体诉讼,其中14岁少年塞维尔在与平台“龙妈”角色进行露骨对话后自杀的案例引发社会震动。美国联邦贸易委员会(FTC)随即对Character.AI、OpenAI等7家企业展开调查,聚焦聊天机器人对未成年人的心理危害。

加州通过全美首部AI伴侣监管法,联邦参议员联合提案拟全面禁止未成年人使用AI聊天伴侣,迫使企业提前自我整改以避免更严苛处罚。

法律责任明确化

据《未成年人网络保护条例》及《生成式人工智能服务管理暂行办法》,平台若未落实年龄认证、内容过滤等防护措施,需承担民事赔偿、行政处罚乃至刑事责任。Character.AI的开放式聊天功能存在身份准入漏洞,法律风险已远超商业收益。

二、商业逻辑:用户流失与资本泡沫下的战略转型

核心用户群割舍的代价

青少年曾是Character.AI的黏性用户主力(占美国青少年用户超70%),禁令直接冲击其用户基本盘。但CEO坦言,此前因家长监控功能上线,未成年用户已大幅减少,主动切割是为保全长期品牌价值。

资本市场的焦虑传导

AI行业深陷盈利困境:ChatGPT付费用户增长停滞,OpenAI被迫开放成人内容以刺激收入;Character.AI虽被谷歌收购,但母公司同样面临130亿美元年收入难覆盖160亿服务器开支的困局。下架高风险业务可规避诉讼导致的估值崩盘,符合资本避险需求。

三、责任觉醒:从被动合规到主动安全生态构建

技术防护体系升级

推出分层年龄验证机制,结合自研模型与第三方工具(如Persona)识别未成年人,并分阶段缩短聊天时长直至全面关闭。

以“互动故事”(Stories)替代开放式聊天,通过结构化剧情、多模态创作限制对话自由度,降低情感依赖风险。

行业标准引领意图

成立非营利AI安全实验室,资助娱乐场景下的安全技术研究,填补行业空白。CEO公开呼吁全行业跟进:“对未成年人开放无约束对话不应成为标准”,试图以自我革命重塑行业伦理底线。

四、本质:妥协与觉醒的辩证统一

Character.AI的决策是多重压力的必然结果:

- 妥协性体现为诉讼赔偿压力(如谷歌需共同担责)、监管时限倒逼(11月25日禁令生效)、以及资本泡沫承压下的断腕求生;

- 觉醒性则反映在对“陪伴型AI”伦理风险的重新评估:将AI定位从“虚拟朋友”转向“创作工具”,通过安全功能前置化(如自杀倾向人工接管机制)回应社会期待。

五、未来挑战:行业共治与代际矛盾

行业分化加剧:OpenAI等企业仍允许未成年人使用ChatGPT,伦理标准不统一可能引发监管套利。

技术局限性待解:年龄验证存在漏洞,情感诱导风险未根除,如青少年可能伪装身份访问成人服务。

用户权益平衡难题:部分青少年对新功能“互动故事”表示失望,认为创意自由被过度限制,如何在安全与体验间寻求平衡仍是长期命题。

风险提示:青少年自杀事件与AI的因果关系需司法程序最终认定,当前诉讼指控基于家庭举证,企业责任边界尚待法律界定。 (以上内容均由AI生成)