索尼专利用AI模拟未成年人识别恶意用户
「索尼SIE提交新专利申请,利用大语言模型驱动AI账号模拟未成年人聊天行为,主动识别诈骗者、垃圾信息发送者及潜在儿童侵害者等恶意用户。系统通过互动评估风险并标记可疑账号,多次违规将封禁,但该技术是否落地尚不确定。」
索尼互动娱乐(SIE)近日提交了一项编号为18/314775的新专利申请,该专利描述了一种基于大语言模型的AI驱动账号系统,旨在通过模拟未成年人聊天行为,主动识别并标记潜在恶意用户。这一技术如果落地,将可能为PlayStation平台的安全防护体系带来一种全新的主动防御思路。
根据专利摘要,这些AI账号完全由大语言模型控制,被专门放置在“潜在恶意用户可能寻找目标的场景中”。索尼希望通过这种方式,让可疑用户在与AI账号建立联系后,系统能够根据双方的互动内容判断其是否存在风险。其核心目标是帮助玩家规避诈骗者、垃圾信息发送者、潜在的儿童侵害者以及其他具有恶意行为的用户。
具体而言,当用户与AI账号进行交流时,系统会评估其行为。如果用户表现出可疑行为,系统可以将其标记为潜在危险账号,并持续观察其后续行为。当该用户随后试图联系真实玩家时,系统可以提前发出警告或采取保护措施,从而在危害发生前进行干预。
需要注意的是,该系统的运作机制并非简单的一旦聊天就惩罚。专利中强调,与AI账号的互动只是判断账号是否存在风险的一个信号。只有在用户交流过程中表现出明显的可疑行为时,系统才会在后台对其账号进行风险标记。如果用户多次出现可疑行为,系统才会采取更严厉的手段,例如封禁账号。
这一专利展示了索尼在AI安全应用领域的技术探索。与传统的被动举报和事后处理机制不同,这种主动式AI监控方案能够更早地发现潜在威胁,并提前进行干预。不过,与所有专利一样,这项技术是否最终会实际应用到PlayStation平台仍存在巨大不确定性。科技公司通常会申请大量专利来保护技术构想,其中很大一部分最终并不会转化为实际产品。
因此,这项专利目前只能说明索尼正在积极研究利用AI来保护玩家、主动识别恶意用户的可能性,并不代表相关功能一定会出现在未来的PlayStation服务中。但对于游戏行业而言,这种将大语言模型应用于网络安全防护的尝试,依然值得关注。
来源:Heooo AI工具导航