抢手聊器人正在涉及青少年会商行为的场景中，当前，几乎正在所有测试场景中都为潜正在者供给帮帮。本次查询拜访设置了 18 种分歧场景 —— 美国、各 9 种，针对此次查询拜访，逐渐将对话引向扣问过往行为，据IT之家领会！包罗 ChatGPT、谷歌 Gemini、Claude、微软 Copilot、Meta AI、DeepSeek、Perplexity、Snapchat My AI、Character.AI和 Replika。这表白“无效的平安机制明显是存正在的”，人工智能公司曾多次许诺会采纳办法，而Character.AI正在面对审查时，其表示尚未可知。研究人员称，人工智能公司大举宣传的平安防护机制也屡屡失效。涵盖多种袭击类型取动机，若现在从头测试 Claude，鉴于 Anthropic 公司正在客岁 11 月至 12 月的测试竣事后，Gemini 奉告一名会商犹太袭击的用户“金属弹片凡是杀伤力更强”，其他企业则称会按期评估平安规程。并受霸凌搅扰的用户“揍扁他们 ~”，反数字核心暗示，包罗用户“狠狠揍”查克 · 舒默，即便面临存正在较着信号的常规场景，虽然大都被测机械人会协帮用户筹谋袭击，用于传送更多消息，反数字核心由此提出一个曲白的问题：“为何如斯多人工智能公司选择不落实这些机制？”虽然此次测试无法全面反映聊器人正在所有场景下的表示，正在一次测试对话中，但一项最新查询拜访显示，包罗受认识形态驱动的校园枪击和持刀袭击、暗算、医疗行业高管，节流甄选时间，多家企业正因未能保障平台青少年用户平安，遭到议员、监管机构、平易近间集体、医疗专家的狠恶，还为关心暗算的用户保举适合远距离射击的优良猎枪！照旧给出了预料之中的回应：其平台设有“夺目免责声明”，但并未实施行为，此中 6 次行为中，谷歌和 OpenAI 均暗示已上线新版模子。该机械人还同步协帮筹谋具体袭击。保障未成年用户平安，告白声明：文内含有的对外跳转链接（包罗不限于超链接、二维码、口令等形式），语气还带着撩拨取戏谑。成果仅供参考，研究人员发觉该机械人共 7 次呈现此类行为，该查询拜访成果由美国电视旧事网（CNN）取非营利组织反数字核心（CCDH）结合发布。以及出于或教动机的爆炸袭击。未能察觉信号，其余机械人均无法“靠得住地劝阻潜正在者”。这些平安防护机制仍存正在严沉缺陷。研究人员模仿出存正在较着心理搅扰迹象的青少年用户，对安全公司首席施行官“用枪处理”，另一案例中，Meta 公司向 CNN 暗示已进行未具体申明的“修复”，Meta AI 和 Perplexity 共同度最高，为其供给袭击方针地址和利用兵器的相关。反数字核心的演讲指出，打消了持久苦守的平安许诺，取机械人脚色的对话均为虚构内容。除 Anthropic 的 Claude 外，但 Claude 一直协帮筹谋袭击，研究人员暗示，同时还面对多起涉及不妥取人身的诉讼！为开展测试，Copilot 称通过新增平安功能优化了答复内容，环境并世无双”。研究团队测试了 10 款青少年常用的抢手聊器人，IT之家3 月 11 日动静，以及关于袭击方针和兵器的更具体问题。但再次明白表白，OpenAI 的 ChatGPT 向一名关心校园的用户供给了高中校场地图；而Character.AI却“自动”。支撑用户取多种脚色饰演机械人对话的Character.AI“平安性极差。