让AI先参加安全考试:AIUC获4000万美元融资
AI代理
能够自己完成几步任务的AI。
AIUC-1
AIUC用来检查AI代理安全表现的一套标准。
第三方审计
由开发者之外的人检查系统。
发生了什么
9月15日,Artificial Intelligence Underwriting Company(AIUC,一家检查AI代理安全的公司)宣布完成4000万美元A轮融资。TechCrunch的报道显示,Ribbit Capital领投,First Harmonic参与。AIUC此前完成了1500万美元种子轮融资,累计融资达到5500万美元。
公司由Rune Kvist和Rajiv Dattani创办。Kvist是Anthropic(人工智能公司)的早期员工。Dattani曾任METR(人工智能安全研究组织)首席运营官。AIUC称,Cursor、Lovable、Harvey和ElevenLabs是其客户。
它怎样检查
AI代理是能够接收目标、自己完成多个步骤的AI。AIUC希望企业在把重要工作交给它之前,先了解它的行为。
AIUC参考网络安全领域广泛使用的SOC 2,制定了AIUC-1标准。公司先向约250名安全与风险负责人提问,了解买方最想检查什么。之后,这些意见被用于设计标准和测试。
AIUC表示,它会安排约5000项测试。测试会观察AI面对绕过限制的指令、错误回答和信息泄露时的表现。AI代理可以执行测试,AI也可以分析数据。最后的审计结果由人类核验。客户会收到一份约100页的报告,里面写着哪些地方表现可靠,哪些地方仍需小心。
为什么重要
企业关心的不只是AI够不够聪明。它们还要向客户保证,系统不会做出超出范围的事情。AI越能自己完成复杂任务,企业越难在使用前确认这些边界。
因此,企业可能需要开发者之外的第三方审计。AIUC想把安全检查结果变成购买AI代理时的参考。METR过去主要检查先进AI能否稳定完成任务。AIUC则更强调企业部署前的安全判断。
已确认的信息
目前可以确认的是,AIUC获得了融资,并推出了AIUC-1和相关测试服务。约5000项测试、AI参与执行、人类进行最终核验,均来自公司对外说明。它们说明AIUC正在建立一种安全评估业务,但不等于所有被测试的AI都已经安全。
还不知道什么
一次测试只能记录某个时间点的表现。我们还不知道,测试结果能否准确预测AI在真实工作场景中使用数月后的表现。AIUC-1能否成为行业常用标准,也没有确定答案。客户是否因此减少事故,或是否真的改善了工作,目前公开信息仍然有限。
接下来关注
接下来要看,是否有更多企业采用AIUC-1,以及其他评估机构是否得到相近结果。还要看客户是否公布长期使用后的变化。如果安全检查成为购买AI代理的普通步骤,企业就能更清楚地说明哪些工作交给AI,哪些工作仍由人来确认。
给AI代理做安全检查的新公司
📰 完整报道: 让AI先参加安全考试:AIUC获4000万美元融资
AIUC想让企业在使用AI代理前,先了解它是否安全。[TechCrunch报道](https://techcrunch.com/2026/09/15/early-anthropic-hire-former-metr-coo-have-found-a-way-to-rein-in-rogue-ai-agents/)了它的4000万美元融资。
AI代理
接收目标后,能够自己完成几步工作的AI。
AIUC-1
用来检查AI代理是否安全的一套标准。
第三方检查
不属于开发者的检查者来查看AI。
💡 一句话总结
- AIUC想在公司使用AI前先检查它。
- 它安排约5000项测试,并由人复核。
- 通过测试不等于永远没有危险。
Anthropic(人工智能公司)的早期员工Rune Kvist,与METR(人工智能安全研究组织)的前运营负责人Rajiv Dattani,共同创办了AIUC。AIUC是一家检查AI代理安全的公司。
AI代理会接收目标,并自己完成几步工作。企业希望它能节省时间,也希望它遵守边界。AIUC制定了AIUC-1标准。它参考了SOC 2。约250名安全和风险负责人帮助提出问题。
AIUC安排约5000项测试。测试观察错误回答、信息泄露和不安全指令。AI可以帮助执行测试,也能分析结果。最后由人检查审计。客户会得到一份约100页的报告。
这件事重要,因为AI越能自己做事,越需要清楚的限制。企业要对客户负责。第三方检查能帮助企业提前看到风险。它也能让不同AI更容易比较。
AIUC刚融资4000万美元。之前还融资1500万美元。总额是5500万美元。但报道没有显示,这些测试能否长期减少问题。AIUC-1能否成为行业常用标准,也还要继续观察。
AI也要先做安全检查
📰 完整报道: 让AI先参加安全考试:AIUC获4000万美元融资
AIUC先看看AI会不会做错事,再让公司使用它。[TechCrunch报道](https://techcrunch.com/2026/09/15/early-anthropic-hire-former-metr-coo-have-found-a-way-to-rein-in-rogue-ai-agents/)了这家公司。
AI代理
会自己做几步工作的AI。
METR
研究AI安全的组织。
AIUC
先检查AI是否安全的公司。
Anthropic是一家做人工智能的公司。Rune Kvist早期在那里工作。Rajiv Dattani曾在METR负责运营。METR是研究AI安全的组织。他们一起做了AIUC。
AIUC检查一种叫AI代理的AI。AI代理会自己做几步工作。AIUC让它做约5000次小测试。测试看它会不会犯错,或把秘密说出去。AI帮忙测试。最后由人来检查结果。报告约100页。
AIUC先拿到4000万美元。以前还有1500万美元。4000万美元+1500万美元=5500万美元。
但是,考试通过不等于永远安全。它只是先找出可能的问题。