AIUC 宣布 4000 万美元 A 轮:用「标准(AIUC-1)+ 保险(Lloyd’s 等)」做前沿 AI 的置信基础设施——绑定约束已从能力转向风险与信任;从 Anthropic 早期到 Waymo「能开却难部署」的隐喻,到 agent 季度红队、模型层政府—实验室信任缺口、版权逆向选择与 AI 工程师认证,Rune 主张实验室不能自当唯一看门狗。
- 风险成绑定约束:前沿采用卡在信任/责任,而非裸能力。
- 标准+保险文明蓝图:电力/汽车/UL 历史表明市场可先于监管造置信基础设施。
- AIUC-1:季度更新、技术测试落地的 agent 安全/可靠标准。
Underwriting Superintelligence: Backing Agents you can Sue — Rune Kvist, AIUC|深度中文详解
嘉宾:Rune Kvist(AIUC CEO)· 主持 swyx / Vibhu · 日期:2026-09-16(PT)
播出信息
- 日期:2026-09-16(PT)
- 嘉宾:Rune Kvist(AIUC CEO)· 主持 swyx / Vibhu
- 时长:约 86 分钟(RSS itunes:duration=5174s)
- 官方章节末段起点:1:19:10(约 92%)
节目结构(官方章节)
- AIUC 的 4000 万轮与 AI 采用的风险瓶颈 — 00:00 🎧 · ▶️
- 从 Scaling Laws 到早期 Anthropic — 01:07 🎧 · ▶️
- 为何信任而非能力可能限制 AI 采用 — 07:58 🎧 · ▶️
- 创立 AIUC 与构建 AIUC-1 — 12:19 🎧 · ▶️
- 如何审计与压力测试 AI Agent — 18:52 🎧 · ▶️
- 前沿模型、政府与 AI 信任缺口 — 25:26 🎧 · ▶️
- 网络、儿童安全与 AI 赋能生物风险 — 33:32 🎧 · ▶️
- 为何标准与保险必须在一起 — 38:14 🎧 · ▶️
- AI 保单实际保什么 — 41:45 🎧 · ▶️
- 20 美元 Cursor 与 2 亿美元空难 — 50:44 🎧 · ▶️
- 责任、持续监控与赢得企业信任 — 53:53 🎧 · ▶️
- 从 Agent 到模型再到机器人 — 56:21 🎧 · ▶️
- 版权、逆向选择与 AI 保险 — 58:29 🎧 · ▶️
- Evals、机制可解释性与评测觉察 — 1:03:28 🎧 · ▶️
- 企业 AI 的不可能任务 — 1:08:36 🎧 · ▶️
- 预测市场 vs AI 审计 — 1:11:52 🎧 · ▶️
- AI 工程师是否该认证 — 1:14:43 🎧 · ▶️
- 路线图、AGI 与谁来监督监督者 — 1:19:10 🎧 · ▶️
分节详解
1) AIUC 的 4000 万轮与 AI 采用的风险瓶颈 — 00:00 🎧 · ▶️
💬 他们说了什么: 工作室开场:Rune 宣布 Ribbit Capital 与 First Harmonic 领投的 4000 万美元融资;客户包括 Cursor、Harvey、Lovable、ElevenLabs。种子轮时「风险会压制采用」还像假说,如今在 Mythos/Fable 语境下已成事实——绑定约束是风险而非能力。
💡 为什么重要: 把整集定调为「置信基础设施」叙事,并把融资新闻接到真实企业客户名单上。
⚡ 争议点: 「此刻风险已成事实」是否过度绑定当下新闻周期?能力瓶颈在部分场景仍硬。
2) 从 Scaling Laws 到早期 Anthropic — 01:07 🎧 · ▶️
💬 Rune:2021 末卖出教育科技公司后读到 Kaplan Scaling Laws,「越大越聪明」意味着资本能理解可预测回报;从未去过 SF 却打包去找作者,彼时 Anthropic 约 40 人。swyx 强调 PPE(哲学政治经济)背景让他读出资本家式结论,而非纯 ML 读法。Anthropic 有对 2026 算力/CapEx/社会影响的愿景文档,像「水晶球」。
💡 解释创始人为何从能力侧转向风险侧:他亲历「认真对待 scaling」如何改写社会议程。
⚡ 事后诸葛亮风险:早期 Anthropic 叙事被今日成功放大;PPE→保险创业的因果链是否被美化。
3) 为何信任而非能力可能限制 AI 采用 — 07:58 🎧 · ▶️
💬 Rune:AIUC 做「通过标准与保险的置信基础设施」。早期 Anthropic 办公室窗外 Waymo 已是「车的 AGI」,却长期难去机场——约束是责任/风险/信任。模型越强越自主,风险面越大。历史蓝图:电力、汽车、民用核都曾由市场跑在监管前,用标准+保险促成 go/no-go。对银行/医院墙到墙 rollout,「我们被独立第三方按金标准测过,且最保守保险人愿上资产负债表」是黄金句。
💡 核心产品哲学:标准定义测试与规则,保险把风险定价并激励减损。
⚡ 类比电力/汽车是否低估 AI 的全球即时外部性;保险能否覆盖长尾灾难。
4) 创立 AIUC 与构建 AIUC-1 — 12:19 🎧 · ▶️
💬 联合创始人 Rajiv 是准大舅哥、前麦肯锡保险合伙人、后任 METR COO(与 Anthropic/OpenAI 及美英政府测模型)。公司约 20 人。AIUC-1:agent 安全/安全/可靠性标准;设计原则是把拖慢采用的恐惧装进一个框架;必须季度技术测试(越狱、幻觉、泄密);与 Fortune 1000 风险官联盟每季度更新。含 crosswalk 映射其他框架,并把要求落成控制活动与证据。
💡 展示「谁写标准、为何季度更新、证据要细到风险官能问什么」的运营机制。
⚡ 家族创业与利益冲突;营利性标准是否会向付费客户倾斜。
5) 如何审计与压力测试 AI Agent — 18:52 🎧 · ▶️
💬 三类要求:技术控制(护栏存在)、测试控制(第三方实测)、政策控制(问责人与事件沟通)。审计伙伴如 KPMG/Schellman 查证据;AIUC 自己跑幻觉等第三方测试。认证约 3–10 周,常含整改;证书一年、季度更新。标准已从偏客服文本 agent 扩展到代码、自动化、MCP/agent 通信等。多数公司有架构但未认真做对抗压力测试,护栏「有」≠「管用」。
💡 把「安全剧场」与「可测证据」切开,对工程听众最可操作。
⚡ 季度抽检 vs 日更发布的频率错配;整改后是否过拟合测试集。
6) 前沿模型、政府与 AI 信任缺口 — 25:26 🎧 · ▶️
💬 Mythos/Fable 把问题推到模型/国安层:企业侧是 CISO,模型侧是政府。实验室懂风险但有不说实话的激励→需要中立第三方(类 Moody’s 评级)。可公开标准+一致技术审计。政府可自建(如 NIST 下 CAISI),但预算相对挑战极小;立法节奏跟不上风险季度变化。目标是给快速决策提供兼容创新的风险信息,而非把模型锁数月。
💡 把 agent 产品故事升维到「政府—实验室」制度设计。
⚡ 私营评级机构历史丑闻(次贷等);「每个模型都能越狱」如何写成可行动政策。
7) 网络、儿童安全与 AI 赋能生物风险 — 33:32 🎧 · ▶️
💬 当日风险是网络;儿童安全政治与实质都升温;生物武器可及性是管道中风险。Agent 被故意收窄话题,模型风险面近乎无限——没有单一专家能同时评估网络、青少年长期对话与生物武器。需要专家联盟+统一审计接口输出一份可读评级报告。OWASP 等擅框架,AIUC 做第三方审计机器与「承诺层」。
💡 说明模型审计为何是协调问题而非单点红队。
⚡ 生物风险话语是否被安全圈过度加权;「一家公司协调」的垄断风险。
8) 为何标准与保险必须在一起 — 38:14 🎧 · ▶️
💬 营利动机:纯非营利标准常对服务对象响应慢;Moody’s/FICO/公路安全保险研究所/UL(Underwriters Laboratories,AIUC 名称致敬)显示保险激励可驱动减损标准。营利标准+保险人反馈:既贴近客户又不易空心化。
💡 回答「有共识为何还要钱」——保险是激励对齐与信任信号。
⚡ 次贷危机中评级机构失灵的阴影;保险驱动是否忽略无法定价的灾难。
9) AI 保单实际保什么 — 41:45 🎧 · ▶️
💬 需求多在「造 AI 者」与「买 AI 者」之间。保险人愿承保=「风险可管理」的强信号(Waymo 早期许可也曾堆保险)。形态仍是传统:承保风险、限额、保费。ElevenLabs 与 Lloyd’s 写了首创 AI agent 保单;Lloyd’s 负责赔付信誉,AIUC-1 与评测喂定价。AIUC 分润定价/分销,短期不与保险人拼风险资本成本。
💡 把抽象「underwriting」落成合同与供应链角色。
⚡ 尚无理赔史时,保单是否主要是销售道具;限额相对灾难损失是否象征性。
10) 20 美元 Cursor 与 2 亿美元空难 — 50:44 🎧 · ▶️
💬 尚无理赔。swyx 假设:月付 20 美元 vibe coding 导致 2 亿损失——能赔多少?Rune:先看保单限额;法律史会逐步澄清。Air Canada 聊天机器人幻觉退款政策:法院认定对客机器人构成有约束力承诺,不能甩锅「机器人撒谎」。过失常参照是否尽到注意义务——被广泛采纳的标准会成为法院标尺。
💡 用极限思想实验+已有判例连接标准、责任与保险。
⚡ 开源工具链的责任分配(用户/应用/模型商);先例外推速度。
11) 责任、持续监控与赢得企业信任 — 53:53 🎧 · ▶️
💬 认证非每日发版审批,但要求自身重大发布前测试并告知客户;留下可追问轨迹。大公司默认有一定信任,年轻公司默认没有——自写安全博客说服力弱,第三方标准更「可读」。
💡 回应「季度认证 vs 日更」工程现实。
⚡ 重大 vs 微小变更的边界谁说了算;监控是否引入客户数据隐私摩擦。
12) 从 Agent 到模型再到机器人 — 56:21 🎧 · ▶️
💬 路线图:AIUC-1 覆盖 agents → 模型 → 机器人(Waymo 是第一只机器人)。物理 AI 严格性陡增(Cruise 被吊销许可)。多 agent 无人类中介交易需要「可起诉的资产负债表」;世界模型等新模态会扩风险面。
💡 给出公司叙事的时间轴与物理世界终点。
⚡ 是否摊子过大;机器人监管是否会走完全不同的产品安全路径。
13) 版权、逆向选择与 AI 保险 — 58:29 🎧 · ▶️
💬 版权险需求旺、供给少:知情训练侵权者最想买保险→柠檬市场/逆向选择。应用方用开源模型不知训练数据时,注意义务边界模糊。信息不对称是保险核心;可信测试可打破。Moody’s 必须独立才能作信号。公开变更日志降低篡改空间。
💡 用微观经济学解释「为何有些险种写不出来」。
⚡ 透明能否真解决版权;公开标准是否泄露攻击面。
14) Evals、机制可解释性与评测觉察 — 1:03:28 🎧 · ▶️
💬 mech interp(如 Goodfire)有科学潜力,商业上尚未到「强制要求」,但可作加分项出现在百页审计报告。评测觉察:模型知道被测就不做会被罚的事→应更不信任 eval,转向生产监控(是否真给了医疗建议等)。Anthropic 研究暗示 LessWrong 等对齐讨论进训练数据会影响失败率;提及 hyperstition / Luigi-Waluigi。
💡 把评测军备竞赛的认识论危机写进保险/标准语境。
⚡ 「少讨论 eval awareness」与开放科学冲突;监控客户数据的红线。
15) 企业 AI 的不可能任务 — 1:08:36 🎧 · ▶️
💬 托管 agent 平台带来更多企业安全能力。核心张力:agent 有用正因为随机,难采用也因为随机。Fortune 1000 CISO 情绪:CEO「必须采用否则irrelevant,搞砸就炒你」。AIUC 把抽象焦虑变成框架。生成媒体风险多在版权与广义安全;全无人视频上线仍少。
💡 回到买家心理——标准的「客户」经常是被夹在中间的安全官。
⚡ 框架是否只是让人「感觉安全」;CEO 激励是否系统性压垮控制。
16) 预测市场 vs AI 审计 — 1:11:52 🎧 · ▶️
💬 预测市场依赖公共信息;未发布模型能力等多属私密/未知,无法交易。银行安全官要的是「这个产品在我场景会不会干坏事」——信息可能根本不存在,需付费生成,这是第三方审计位。财务舞弊也不靠预测市场而靠审计。
💡 划清聚合已有信息 vs 生成可信证据。
⚡ 内部人泄露是否让市场「够用」;审计同样可能俘获。
17) AI 工程师是否该认证 — 1:14:43 🎧 · ▶️
💬 swyx 提 Level 1/2/3(类 CFA)。Rune:若目标是加速安全部署,左移安全规格会有帮助;评分标准由 AIUC 定,训练项目可第三方做。swyx 顾虑:规定「该知道什么」等于规定「不必知道什么」。OpenAI/Anthropic 也有顾问认证野心。
💡 触及 Latent Space 听众身份政治与产业培训。
⚡ 认证是否制造资质通胀;由承保方定教学大纲的权力问题。
18) 路线图、AGI 与谁来监督监督者 — 1:19:10 🎧 · ▶️
💬 收束:实验室不能完全自当看门狗;要防止监督者竞相把标准「竞次」到底(Big Short 问题)。AGI 可能上升为国家主权问题。置信基础设施是文明层拼图:标准澄清责任,保险兑现承诺,审计提供可检验证据。
💡 把商业叙事接到治理元问题。
⚡ 监督监督者的无限回归;国家主义框架是否挤压跨国开源。
金句
- 「绑定约束已经是风险。」
- 「Waymo 某种意义上已是车的 AGI,但你仍不能坐它去机场。」
- 「没有别的行业允许主体完全自审计。」
- 「若你把聊天机器人推到客户面前,你就在为它负责。」
来源
- 原集:latent.space
- YouTube
- EN 转写:latent.space
- 音频
- 分析基于 latent.space 官方章节时间戳 + 页面内嵌 EN 对话转写;YouTube 视频《The Watchdogs of AGI — Rune Kvist》。
- 未创建中文全文转写页;本页仅为深度中文详解。