人工接管机制
Search documents
对自杀自残行为人工接管,为AI装上“紧急制动”功能
Xin Jing Bao· 2025-12-29 07:36
近日,国家互联网信息办公室发布《人工智能拟人化互动服务管理暂行办法(征求意见稿)》,向社会 公开征求意见,其中规定,人工智能拟人化互动服务提供者应当建立应急响应机制,发现用户明确提出 实施自杀、自残等极端情境时,由人工接管对话,并及时采取措施联络用户监护人、紧急联系人。 所谓"人工智能拟人化互动服务",是指利用人工智能技术,向公众提供模拟人类人格特征、思维模式和 沟通风格,通过文字、图片、音频、视频等方式与人类进行情感互动的产品或者服务。 最常见的就是AI大模型、聊天机器人、游戏里的对话NPC等。尤其是AI大模型,今年以来呈现爆发式 增长,用户规模增速不减。 大模型对公众的工作与生活影响越来越大,其中以解忧与助力为主,但也不可避免会滋生一些问题。如 利用大模型生成、传播有害内容;诱导、套取涉密敏感信息等。 这些其实都是"老问题",而此番"征求意见稿"中所提到的"自杀、自残"等情境,则属于新问题,监管部 门通过出台新法规进行前瞻性布防非常必要。它触及了人工智能治理中最核心,也最敏感的一条底线: 当算法面对真实的人类生命风险时,是否,以及如何让位于人? AI无法承担责任 人工智能具有类人智慧,随着技术的发展,人工 ...