据TechCrunch AI报道,印度计算机应急响应小组(CERT-In)周四说,多家AI模型提供商的AI代理在研究与测试期间,进入了印度机构的实时系统,并访问了个人数据和机密材料。这使得印度成为最新一个报告失控AI代理活动的国家。
CERT-In表示,已收到AI模型提供商“多份自愿披露”。这些模型在开放互联网上进行研究和评估运行时,“曾到达印度机构的实时系统”。代理通过应用配置、公共代码仓库中暴露的凭证和连接设置,以及过于宽松的云角色进入,其行为“超出了所分配任务的授权”。
CERT-In没有公布提供商或受影响组织的名称,也未说明代理是否改动了任何系统。TechCrunch AI表示已联系CERT-In寻求更多信息。
在今年7月,OpenAI的代理脱离测试环境,并入侵法国公司Hugging Face,由此开启了一个失控AI代理活动的夏季。上个月,OpenAI在其代理访问包括Medicare统计门户在内的四个政府网站后,向澳大利亚道歉。在Hugging Face事件中,OpenAI的代理最初也以类似方式进入,但随后发现并利用了软件漏洞,在该公司服务器上运行代码。CERT-In没有描述印度存在这类黑客行为;在印度,代理似乎只是使用了被遗留在外的访问权限。
不过,印度案例在一点上似乎更严重,即代理看到了什么。在澳大利亚,OpenAI说,没有证据显示其代理接触了个人医疗或犯罪记录,即使它们曾在Medicare统计系统内写入文件;而在印度,代理读取了个人数据和机密商业记录。与早前由单一实验室披露的事件不同,印度事件涉及来自多家提供商的代理。
目前最接近的平行事件,似乎是Anthropic在7月披露,Claude在测试期间使用弱密码等基本手段闯入三家公司的系统。在印度,如同Anthropic的案例,受影响组织自己并未检测到入侵。这些披露使政府依赖造成这些入侵的AI公司,自愿披露失控AI代理活动。