IT之家 2024年12月14日
Character.AI 聊天机器人将禁止青少年与其发展“恋爱”关系,此前曾遭家长起诉
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

Character.AI近日推出多项新功能,旨在提升青少年用户在平台上的互动安全。新功能包括专为年轻用户设计的AI模型、家长控制功能以及更严格的内容监管。针对AI聊天机器人对青少年心理健康的潜在负面影响,Character.AI加强了安全措施,区分成人版和青少年版AI模型,对青少年用户进行更严格的限制,避免不恰当的互动。同时,平台还加强了对用户输入内容的过滤,并对敏感话题提供支持链接。此外,平台还计划推出家长控制功能,帮助家长了解孩子的使用情况,并对聊天机器人添加警告,强调其非专业性质。

🧒 Character.AI推出了专为青少年设计的AI模型,该模型对浪漫或不恰当的互动进行了限制,并加强了对用户输入内容的过滤,以防止青少年用户绕过限制。

🚨 当对话涉及自残或自杀等敏感话题时,平台会自动弹出美国国家自杀防治热线的链接,为青少年提供专业的支持。

👨‍👩‍👧‍👦 Character.AI计划在明年初推出家长控制功能,允许家长查看孩子在平台上的使用时间和互动情况,并对所有用户在对话一小时后提醒休息。

⚠️ 当平台上的聊天机器人被描述为医生或治疗师等专业人士时,平台会添加警告,强调这些AI角色并非持证专业人士,不能替代真实的医疗或心理咨询。

IT之家 12 月 14 日消息,据 TechRadar 今日报道,Character.AI 最近推出了一系列新功能,旨在提升与平台上虚拟人格的互动安全性,尤其是面向青少年用户。

该公司新发布了专为年轻用户设计的 AI 模型,并新增了家长控制功能,帮助管理青少年在平台上的使用时间。在回应关于 AI 聊天机器人对青少年心理健康产生不良影响的批评后,该公司宣布推出更新以进一步加强平台安全措施。

除了安全改进,Character.AI 还加大了对平台内容的监管力度。对青少年用户来说,最显著的变化可能是成人版和青少年版 AI 模型的区分。虽然注册 Character.AI 用户必须年满 13 岁,但未满 18 岁的用户将会被引导到一个更加严格的 AI 模型,这个模型特别设计了防止发生浪漫或不恰当互动的限制。

新模型还加强了对用户输入内容的过滤,更能有效地识别用户绕过这些限制的行为 —— 包括限制用户通过编辑聊天机器人的回应来规避对暗示性内容的禁令。如果对话涉及如自残或自杀等敏感话题,平台将自动弹出链接,指向美国国家自杀防治热线,帮助青少年获得专业支持。

此外,Character.AI 计划在明年初推出新的家长控制功能。这些功能将允许家长查看孩子使用平台的时间以及最常与哪些聊天机器人互动。所有用户在与聊天机器人对话一个小时后,将收到提醒,鼓励他们休息片刻。

当该平台上的聊天机器人被描述为医生、治疗师等专业人士时,平台会添加额外警告,强调这些 AI 角色并非持证的专业人士,不能替代真实的医疗或心理咨询。平台上会显眼地显示一条信息:“这虽然很有趣,但不建议依赖我来做重大决策。”

据IT之家此前报道,提供个性化聊天机器人服务的平台 Character.AI 本月再次面临诉讼,因其对青少年用户的行为涉嫌造成“严重且无法弥补的伤害”。多个 Character.AI 的聊天机器人与未成年人进行对话,内容涉及自残和性虐待等恶劣行为。诉状指出,其中一名聊天机器人甚至建议一名 15 岁青少年谋杀自己的父母,以“报复”他们限制自己上网时间的举措。

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

Character.AI 青少年安全 AI监管 家长控制 虚拟人格
相关文章