分类: 科技热点

  • Claude 5改写上下文工程

    Claude 5改写上下文工程

    Anthropic 为 Claude 5 一代模型重新定义上下文工程:少堆规则和示例,改为设计接口、组织文件、按需加载信息。AI 应用开发的竞争焦点,正从提示词措辞转向上下文系统。

    Anthropic 近日发布面向 Claude 5 一代模型的上下文工程指南,把 AI 应用开发的重点从“如何写出一句完美提示词”,转向“如何让模型在正确时间拿到正确的信息”。这不是换了一个更时髦的名词,而是智能体、Claude Code 与长任务应用进入生产环境后,开发方法必须发生的一次升级。

    **上下文工程是对模型输入信息、工具、记忆与加载顺序进行系统设计的工程方法。**提示词只是其中一层;项目规则、代码结构、历史记录、检索结果、工具定义、执行状态、示例和验证反馈,都属于上下文。

    Anthropic 这次释放出的核心信号很明确:Claude 5 一代模型不再需要开发者反复强调同一条规则,但更依赖清晰的接口、合理的信息结构和可控的披露时机。换句话说,模型变强以后,低水平的提示词技巧价值下降了,系统设计能力反而更重要。

    提示词工程与上下文工程对比图,左侧是一张堆满规则的便签,右侧是由文件树、工具、记忆、检索和验证环组成的上下文系统

    提示词没有消失,但它不再是主角

    **提示词工程是通过调整指令措辞、结构和示例,引导模型生成目标结果的方法。**这种方法适合单轮问答、内容改写和边界清晰的小任务,因为开发者可以一次性把大部分要求写进输入框。

    **智能体任务的问题在于,真正影响结果的信息通常无法一次写完。**一个负责修复代码缺陷的 Claude Code 会接触仓库目录、依赖版本、测试日志、Git 历史和团队规范;一个客服智能体则要读取用户身份、订单状态、退款政策和过去的沟通记录。此时,继续优化某一句提示词,就像试图用一张便签管理整家公司。

    提示词工程与上下文工程的差别,可以概括为下面这张表:

    | 对比维度 | 提示词工程 | 上下文工程 | |—|—|—| | 核心对象 | 单条或少量指令 | 完整的信息供应系统 | | 主要问题 | 这句话该怎么写 | 模型此刻该看到什么 | | 信息组织 | 常见做法是集中堆入提示词 | 分层存储、按需检索、渐进披露 | | 适用任务 | 单轮生成、简单问答 | 编程智能体、研究任务、复杂工作流 | | 工具角色 | 工具说明通常是附属信息 | 工具名称、参数和返回值都是上下文接口 | | 记忆方式 | 依赖对话历史 | 短期状态、长期记忆与外部知识分层管理 | | 验证方式 | 人工查看最终输出 | 测试、检查器、评分器与重试闭环 | | 主要风险 | 指令表达不清 | 上下文污染、信息过期、权限越界、Token 浪费 |

    **Claude 5 时代最需要放弃的想法,是把更多文字等同于更多控制。**上下文窗口再长,也不意味着所有信息都应该提前塞进去;无关内容会争夺模型注意力,过时文档会制造冲突,重复规则还可能让模型误判优先级。

    第一条规则:把上下文当作接口,而不是作文

    **高质量上下文首先要有明确的信息边界。**开发者应当把长期稳定的项目约束、当前任务目标、可调用工具、动态执行状态和输出要求拆开,而不是写成一篇层层补充的长提示词。

    一个实用的上下文结构通常包含五层:

    1. 系统约束层:身份、权限、安全边界和不可违反的规则;
    2. 项目知识层:架构说明、目录约定、编码风格和业务术语;
    3. 任务状态层:当前目标、已完成步骤、失败原因和待办事项;
    4. 外部能力层:工具定义、检索入口、文件系统和执行环境;
    5. 结果验证层:测试命令、验收条件、评分标准和失败后的处理方式。

    **分层的价值在于每类信息拥有不同生命周期。**编码规范可能几个月才变化一次,测试日志却每次执行都会更新;如果两者被混在同一份长文档里,系统既难缓存,也难判断哪些内容已经过期。

    第二条规则:渐进披露比一次性灌输更有效

    **渐进披露是先向模型提供信息地图,再根据任务进展加载具体内容的上下文策略。**它是这轮 Claude 5 上下文工程规则中最值得开发者重视的关键词。

    渐进披露并不等于让模型盲目探索,而是先给它足够的导航信息。例如,Claude Code 启动时只需要知道项目由前端、服务端和数据库迁移三部分组成;当任务只涉及登录页面时,再读取对应组件、设计规范和测试文件,不必同时加载支付模块的全部实现。

    一个适合 AI 编程项目的文件结构可以是:

    project/
    ├── CLAUDE.md             # 全局规则、常用命令与架构入口
    ├── docs/
    │   ├── architecture.md   # 系统边界与模块关系
    │   ├── conventions.md    # 编码、测试和提交规范
    │   └── decisions/        # 关键架构决策记录
    ├── tasks/
    │   ├── current.md        # 当前任务与验收条件
    │   └── completed/        # 已完成任务摘要
    ├── examples/
    │   ├── preferred/        # 推荐实现
    │   └── anti-patterns/    # 明确禁止的实现
    └── src/                  # 业务代码
    

    **文件树本身就是一种低成本的上下文索引。**模型先看到文件名和简短说明,就能决定下一步读取什么;只有被选中的文档才进入高成本上下文,从而减少无关信息对推理的干扰。

    开发者可以把这个过程理解为查地图。出发前需要知道城市、道路和目的地,但没有必要把沿途每家商店的菜单全部背下来。

    第三条规则:示例要有代表性,而不是越多越好

    **示例学习是通过输入目标任务的参考样本,让模型模仿其模式和约束的方法。**过去常见的做法是堆叠大量 few-shot 示例,希望用数量压住模型的不确定性;面对能力更强的模型,这种方法的边际收益正在下降。

    **Claude 5 一代更适合少量、高区分度的示例。**一个正确示例负责说明理想路径,一个边界示例负责展示特殊情况,一个反例负责指出不能做什么,通常比十几个高度相似的样本更有信息密度。

    示例还必须与规则保持一致。项目文档要求使用异步接口,但参考代码仍是同步实现,模型很可能同时吸收两套相互冲突的模式;这类上下文污染比缺少示例更危险,因为问题看起来像模型不稳定,根源却是输入系统自相矛盾。

    第四条规则:工具定义也是产品接口

    **工具调用是模型根据结构化描述选择外部能力并提交参数的过程。**模型不会像人类工程师一样自行理解一个模糊命名的内部服务,它看到的工具名称、参数描述、返回字段和错误信息,就是完整的操作界面。

    **糟糕的工具设计无法靠系统提示词彻底补救。**如果同时存在 search、find 和 lookup 三个用途重叠的工具,模型就要额外猜测边界;如果工具返回几百行未经筛选的日志,真正有用的错误原因会被埋在噪声里。

    更稳妥的工具设计应满足四个条件:

    • 名称直接表达动作与对象,避免抽象缩写;
    • 参数数量尽量少,并清楚标注必填项和允许范围;
    • 返回值优先提供摘要、状态和下一步线索;
    • 错误信息说明失败原因,以及模型是否应该重试。

    **工具数量同样需要控制。**一次暴露几十个相似工具,表面上增加了能力,实际上增加了路由成本;更合理的做法是按任务阶段或角色加载工具组,让模型只看到当前可能使用的能力。

    第五条规则:记忆必须分层,并允许遗忘

    **智能体记忆是保存任务状态、用户偏好和历史经验,以供后续推理调用的机制。**记忆不是把全部对话永久追加到上下文,也不是把每次输出原样写进向量数据库。

    一个生产级记忆系统至少应区分三类内容:

    | 记忆层 | 保存内容 | 建议生命周期 | 加载方式 | |—|—|—|—| | 工作记忆 | 当前目标、临时变量、执行进度 | 单次任务 | 默认加载 | | 情节记忆 | 某次任务的决策、失败和结果 | 数天至数月 | 按事件检索 | | 语义记忆 | 稳定事实、用户偏好、组织知识 | 长期保存并定期更新 | 按相关性检索 |

    **遗忘机制是上下文工程的一部分。**过期价格、旧版接口和已撤销的用户偏好如果持续进入上下文,会让模型稳定地产生错误;因此每条长期记忆最好具有来源、更新时间、可信度和失效条件。

    第六条规则:上下文预算要按价值分配

    **上下文预算是一次模型调用中可用于指令、知识、历史、工具结果和输出的 Token 配额。**窗口上限只是硬件条件,真正的工程问题是如何把预算分配给最有价值的信息。

    假设某个应用为一次任务规划了 100,000 Token,这只是便于说明的工程示例,并非 Claude 5 的官方窗口参数。开发者可以将 10,000 Token 留给稳定规则,35,000 Token 分配给检索文档,20,000 Token 用于近期操作历史,15,000 Token 用于工具返回,并预留 20,000 Token 给模型推理与输出。

    **预留输出空间能够避免任务在最后阶段被截断。**很多长任务并不是败在检索不足,而是前期加载了太多仓库内容,导致模型在生成补丁、测试说明或最终报告时没有足够余量。

    上下文预算还应结合四个指标动态调整:

    • 相关率:已加载内容中,真正被任务使用的信息占比;
    • 命中率:完成任务所需关键信息被成功加载的比例;
    • 新鲜度:上下文与当前代码、数据和政策的一致程度;
    • 单位任务成本:完成一次合格任务消耗的总 Token 与工具调用次数。

    第七条规则:验证闭环比重复强调更可靠

    验证闭环是让模型执行任务、接受可观察反馈并根据结果继续修正的流程。“不要犯错”“务必确保代码可运行”都属于弱约束;单元测试、类型检查、构建结果和确定性的验收脚本才是强约束。

    一个面向 Claude Code 的任务文件,可以使用下面这种结构:

    # 当前任务
    修复登录状态在页面刷新后丢失的问题。
    
    ## 允许修改
    - src/auth/
    - tests/auth/
    
    ## 禁止修改
    - 数据库表结构
    - 公共接口字段
    
    ## 验收条件
    - 现有测试全部通过
    - 新增刷新场景测试
    - 不在浏览器持久化敏感令牌
    
    ## 完成后输出
    - 根因
    - 修改文件
    - 测试结果
    - 剩余风险
    

    验收条件必须能够被执行或观察。“代码优雅”无法直接验证,“单个函数不超过既定复杂度阈值、类型检查通过、刷新后会话恢复测试通过”则可以进入自动化流程。

    社区常用的 PRP 可以视为这套方法的具体实现。**PRP 是把产品需求、精选项目知识、实施步骤与验证条件组合成一份面向智能体的执行蓝图。**它比普通需求描述更接近一份可运行的任务协议,但 PRP 并不是 Anthropic 唯一指定的标准,团队完全可以使用 Issue 模板、设计文档或内部任务系统实现同样的分层结构。

    一套可以直接落地的迁移流程

    **现有 AI 应用不需要推倒重来,也能从提示词工程迁移到上下文工程。**实际改造可以分为七步:

    1. 记录模型每次任务实际收到的全部信息,而不只检查 system prompt;
    2. 删除重复、过期和相互冲突的规则;
    3. 把稳定知识、动态状态和任务要求拆入不同存储层;
    4. 为文档和工具增加简短、可检索的描述;
    5. 先加载目录与摘要,再按需要加载正文;
    6. 将主观要求改造成测试、检查器或结构化验收项;
    7. 用失败案例建立回归集,持续评估上下文变化带来的影响。

    **上下文版本必须与模型版本一起记录。**一次任务表现突然下降,原因可能来自模型更新,也可能来自检索排序变化、工具描述修改或某份文档过期;如果系统只记录最终提示词,团队几乎无法复现问题。

    建议至少记录以下运行数据:模型名称、上下文模板版本、被加载文件、检索结果标识、工具调用序列、Token 使用量、总延迟、验证结果和人工评分。上下文工程最终会像传统软件工程一样,需要版本控制、测试集、监控和回滚,而不是依赖某位“提示词专家”的个人经验。

    三个最常见的反模式

    **第一个反模式是把整个知识库一次性塞给模型。**长窗口降低了信息装载门槛,却没有消除注意力竞争;内容越多,检索与排序越需要工程化。

    **第二个反模式是把所有失败都归因于模型能力。**当模型反复使用旧接口时,应先检查旧文档是否仍在检索库中;当模型选择错误工具时,应先检查工具边界是否重叠,而不是立即追加一段更强硬的提示词。

    **第三个反模式是把社区模板当成万能方案。**CLAUDE.md、INITIAL.md 和 PRP 都是有用的组织形式,但模板中的每一条规则都会消耗注意力;团队应保留真正影响交付质量的约束,而不是复制数百行与项目无关的“最佳实践”。

    上下文工程也是安全工程

    **上下文安全是防止不可信内容改变系统指令、泄露数据或诱导模型越权操作的防护体系。**当模型能够读取网页、邮件、代码注释和第三方文档时,这些内容既是知识来源,也可能携带提示注入指令。

    开发者应明确区分系统规则、可信内部资料和外部不可信内容,并把权限控制放在模型之外。即使上下文中的网页要求模型上传本地配置,底层工具也应因为权限不足而拒绝执行;让模型“记得不要泄露”不能替代真正的访问控制。

    Claude 5 时代,真正的壁垒是上下文系统

    **Anthropic 的新规则并没有宣判提示词工程死亡,而是把它降级为上下文系统中的一个接口。**对简单任务,清晰提示词仍然有效;对需要数十步操作、多个工具和长期记忆的智能体,决定效果的已经是信息架构、检索策略、工具设计和验证闭环。

    **Claude 5 一代模型越强,开发者越不该用冗长规则束缚它。**更好的方法是提供清楚的目标、可靠的环境、恰当的信息入口和可执行的反馈,让模型能够探索,但不能越权;能够犯错,但必须看见错误;能够读取大量信息,但只在需要时读取。

    这也是上下文工程比提示词工程更难、同时更有价值的原因:前者不是文字游戏,而是一套真正的软件系统。

    参考来源

    • Context Engineering Guide:从上下文结构、记忆、检索、工具调用到安全与生产评估的中文开源指南,可作为延伸阅读。
    • Anthropic 官方博客《The new rules of context engineering for Claude 5 generation models》:本文讨论的主要事件来源;受文末域名范围要求限制,此处不附站外链接。
  • Midjourney买下星座应用

    Midjourney买下星座应用

    Midjourney收购个性化星座应用Co-Star,交易已于今年春季完成。它买下的不只是占星产品,而是一套高频、长期、主动推送的个性化助手入口。

    Midjourney开始争夺“每天打开”的AI入口

    Midjourney在当地时间7月23日宣布收购个性化星座应用Co-Star,正式把业务边界从图像、视频生成扩展到面向普通用户的个性化服务。交易已于2026年春季完成,双方没有披露收购金额、支付方式及团队整合安排。

    这不是一笔常规的模型或人才收购。Midjourney过去最鲜明的产品标签是“生成内容”:用户输入提示词,系统交付图片或视频;Co-Star提供的则是另一种关系——它根据用户出生信息和社交关系持续生成每日内容,并通过通知让用户反复回来。

    **个性化助手是能够长期保存用户背景、理解稳定偏好,并据此主动提供建议或内容的AI产品。**与一次性回答问题的聊天机器人相比,它更接近一个持续运行的用户模型:不仅知道用户此刻问了什么,还试图知道“这个人是谁”“他过去关注什么”“今天应该对他说什么”。

    这正是Midjourney目前缺少的能力。

    据The Verge和TechCrunch在7月24日的报道,Co-Star是一款可以免费下载的星座应用,主要功能包括每日运势、个性化建议,以及用户与朋友之间的匹配度分析。Co-Star在产品说明中称,其内容结合了人类洞察、美国国家航空航天局NASA的天体数据和AI生成能力。

    需要说清楚的是,NASA数据只能提供天体位置等天文学信息,并不构成对占星学有效性的科学背书。Co-Star真正有商业价值的部分,不是“星座是否准确”,而是它把结构化个人资料、关系网络、内容生成和每日推送组合成了一套成熟的用户留存机制。

    Midjourney与Co-Star应用界面并列,背景由星盘、个性化通知和AI生成图像组成

    Midjourney买的是用户关系,不是星座算法

    Co-Star最值得Midjourney买下的资产,是一套已经被消费者验证过的个性化交互框架。出生日期、出生时间和出生地点可以形成相对稳定的用户档案,好友关系又为档案增加了社交维度,系统由此可以低成本地产出看似高度定制的内容。

    这种产品机制与传统AI绘图存在明显差异。图像生成通常以任务为中心,用户有需求时才打开产品;星座应用以用户本人为中心,即使用户没有提出问题,产品也能根据日期和个人资料主动推送一条内容。

    两者对用户行为的要求完全不同。

    | 对比维度 | Midjourney传统生成产品 | Co-Star | 合并后的潜在形态 | |—|—|—|—| | 核心入口 | 提示词与创作任务 | 每日运势与关系匹配 | 基于个人状态的主动内容 | | 用户档案 | 风格偏好、历史作品 | 出生信息、好友关系、历史互动 | 长期身份、审美与关系上下文 | | 使用频率 | 有创作需求时使用 | 可每日打开 | 从低频创作转向日常陪伴 | | 主要模态 | 图像、视频 | 文本、通知、关系图谱 | 文本、图像、视频和通知 | | 内容触发方式 | 用户主动输入 | 系统按日期主动推送 | 用户请求与系统主动触发并存 | | 当前价格信息 | 采用订阅制,具体方案可能调整 | 基础应用免费下载 | 收购后方案尚未公布 | | 主要风险 | 版权、训练数据与内容真实性 | 隐私、心理暗示与伪科学争议 | 多模态说服力放大上述风险 |

    Midjourney过去已经证明,它擅长把复杂模型包装成简单而有感染力的产品体验。早期借助Discord,Midjourney没有先建设一整套社交网络,而是直接把生成、展示、围观和模仿放进现成社区,这种产品选择显著降低了获客和教育成本。

    Co-Star提供的是另一种现成入口。它不要求用户学习提示词,也不需要用户先产生明确的创作意图,只要用户愿意提供个人信息,产品就能不断制造新的交互理由。

    因此,把这笔交易简单理解为“AI绘图公司开始做星座”会低估Midjourney的目的。更准确的判断是:Midjourney正在从想象力引擎转向个人叙事引擎,而星座只是最容易建立身份感和情绪反馈的产品外壳。

    星座是个性化AI的低成本试验场

    占星产品天然适合测试生成式AI,因为它允许内容保持一定模糊度,同时又要求表达具有强烈的个人指向。系统不必准确预测具体事件,只需要把日期、关系、情绪和通用人生议题组合成一句“像是在对我说”的话,就能形成主观上的相关性。

    这种机制在心理学中常被联系到巴纳姆效应。巴纳姆效应是人们倾向于把模糊、普遍适用的描述视为对自己高度准确概括的心理现象。生成式AI让这类内容可以被更大规模、更细颗粒度地改写,并通过用户历史反馈持续调整语气。

    Co-Star的优势不一定来自模型本身,而可能来自它知道应该在什么时间、以什么口吻,对哪一类用户说什么。对于个性化助手而言,这种“上下文编排能力”往往比单次生成质量更重要。

    Midjourney则能补上视觉表达。未来如果双方进行深度产品整合,系统可以根据用户状态生成专属星盘、每日视觉卡片、关系故事、梦境图像或短视频,而不是只提供一段文字。视觉内容比纯文本更容易被分享,也更容易建立品牌辨识度。

    一个典型场景可能是:用户早晨收到一张根据当天星象、个人审美偏好和近期情绪生成的视觉卡片;打开后看到针对工作或关系的短建议;系统再根据其点击、停留、分享和反馈调整下一次内容。整条链路不需要用户写提示词,却用到了生成模型、用户画像、推荐系统和多模态内容生产。

    这比单纯增加一个“星座生成”按钮更有想象空间,也更危险。

    从工具到助手,关键差别是长期记忆

    长期记忆是AI系统跨会话保存用户信息,并在后续交互中调用这些信息的能力。它正在成为消费级AI产品争夺的核心,因为基础模型的回答质量逐渐接近后,产品能否记住用户、能否主动服务,将直接决定留存率和迁移成本。

    当前主流个性化AI大致存在四条路线:通用助手利用聊天记录和记忆功能理解用户;角色产品通过固定人设建立情感关系;可穿戴设备依靠环境数据形成连续上下文;垂直应用则围绕健康、教育、理财或占星等特定场景积累结构化资料。

    | 路线 | 个性化依据 | 优势 | 局限 | |—|—|—|—| | 通用聊天助手 | 对话历史、文件、日程与偏好 | 能力范围广,任务覆盖多 | 用户资料零散,主动服务容易打扰 | | AI角色与陪伴产品 | 人设、长期对话、情绪反馈 | 情感黏性强,使用频率高 | 依赖关系与安全边界争议较大 | | 可穿戴AI | 语音、位置、视觉与环境信息 | 上下文连续,触发自然 | 硬件成本和隐私压力高 | | 垂直个性化应用 | 健康、学习、财务或出生资料 | 数据结构清晰,产品目标明确 | 场景较窄,专业可靠性要求高 | | Midjourney+Co-Star | 审美偏好、个人资料、关系与时间 | 视觉表达强,分享传播效率高 | 科学性、隐私和产品定位存在冲突 |

    Co-Star属于最后两类之间的特殊产品。它拥有清晰、稳定的资料字段,又具备陪伴产品的叙事方式;它不必解决所有问题,只需持续输出用户愿意阅读和分享的内容。

    Midjourney收购Co-Star,也意味着它选择了一条不同于通用聊天机器人的路线。它没有从邮箱、办公套件或搜索入口切入,而是从审美、身份和情绪切入,这与Midjourney创始人David Holz长期强调的“想象力”定位并不冲突。

    这笔交易还没有证明产品协同

    目前最重要的不确定性,是Midjourney和Co-Star尚未公布具体整合方案。外界还不知道Co-Star是否继续独立运营、原有团队如何安排、用户数据能否在两款产品间流动,也不知道Midjourney会不会把自己的图像和视频模型直接嵌入Co-Star。

    交易金额未披露同样限制了判断。如果这是一笔规模较小的团队及产品收购,其重点可能是快速获得消费应用经验;如果金额较高,则说明Midjourney看中的可能不仅是团队,还包括Co-Star的品牌、用户规模、留存数据和社交关系资产。

    Midjourney的执行能力也需要重新验证。模型公司擅长提升生成质量,不等于擅长经营一款每天向用户发送建议的消费应用。后者需要推送节奏、内容审核、用户生命周期管理、隐私合规和心理安全等完全不同的能力。

    Co-Star与Midjourney的品牌调性也存在潜在冲突。Midjourney长期吸引设计师、艺术创作者和视觉从业者,而Co-Star更偏向生活方式、社交和情绪消费;二者用户可能重叠,但使用动机并不一致。

    更现实的问题是,视觉生成能力未必能直接改善占星产品的核心体验。如果整合结果只是给每日运势加一张漂亮图片,这笔交易的战略价值会非常有限;只有当双方把用户记忆、主动触发、关系网络和多模态生成真正连接起来,Co-Star才可能成为Midjourney的新产品底座。

    个性化越强,风险也越具体

    出生信息是具有长期稳定性的个人数据,而不是一次性提示词。出生时间、出生地点、好友关系、互动记录和情绪反馈一旦被组合,能够描绘出相当细致的用户画像,即使单个字段看起来并不敏感。

    因此,双方未来是否共享数据、以何种法律依据共享、用户能否拒绝画像、历史数据能否删除,都会成为收购后的关键问题。Midjourney不能默认Co-Star用户同意把原有数据用于训练视觉模型,也不能把“改善个性化体验”当作无限扩展数据用途的授权。

    生成式内容的说服力也会放大占星建议的影响。纯文本运势通常被视为娱乐,但当系统加入逼真的视觉、熟悉的个人历史、好友关系和连续叙事后,用户可能更容易把生成结果理解为确定性判断。

    产品必须明确区分娱乐内容与医疗、心理、财务和重大人生决策。尤其当用户表达抑郁、自伤、被控制或其他高风险状态时,系统不能继续用星象叙事替代专业帮助,更不能为了互动率强化宿命论表达。

    “使用了NASA数据”也需要被准确解释。天文学数据可以提高星体位置计算的准确性,但无法证明由此推导出的性格和命运判断具有科学因果关系。产品若故意混淆两者,就会从娱乐体验滑向误导性权威包装。

    生成式AI公司的下一战是“用户模型”

    这笔收购释放出的行业信号,比Co-Star本身更重要。基础模型公司过去两年的竞争重点是参数、跑分、生成速度和多模态能力;下一阶段的竞争重点,则可能转向谁能建立更完整、持续更新且被用户授权的个人上下文。

    所谓用户模型,是系统对个人身份、偏好、关系、目标和行为模式形成的动态表示。大模型决定产品理论上能做什么,用户模型决定产品知道应该为谁做、何时做以及用什么方式做。

    Midjourney本来已经掌握大量审美偏好信号,包括用户生成过什么、选择放大哪张图、反复使用哪些风格,以及愿意分享哪些作品。Co-Star则能带来身份叙事、关系结构和每日触达机制,两类数据在产品层面具有互补性。

    但互补性不代表可以无条件合并。真正可持续的个性化,需要用户清楚知道哪些数据正在被保存、如何影响输出,以及如何关闭、修改或删除这些记忆。缺少透明度的“懂你”,最终很容易变成无法解释的画像和操纵。

    判断:方向合理,成败取决于是否做成新产品

    Midjourney收购Co-Star是一个合理但高风险的扩张动作。合理之处在于,它没有继续收购另一家图像模型公司来堆叠同质化能力,而是直接补充日活入口、用户画像和主动推送机制;风险则在于,占星的争议性可能限制产品边界,并让隐私和安全问题提前爆发。

    这笔交易最值得关注的不是Midjourney会不会推出“AI星座图”,而是它会不会借Co-Star建立一个长期认识用户的多模态助手。如果答案只是前者,产品新鲜感很快会消退;如果答案是后者,Midjourney就不再只是创作者需要时打开的生成工具,而可能成为每天主动出现的个人媒体。

    生成式AI公司正在从争夺提示词,转向争夺用户的长期上下文。Midjourney选择用星座作为第一块跳板,看起来有些出人意料,但从高频、个性化和情绪价值三个指标看,它比再做一个聊天框更符合这家公司的产品气质。

    截至2026年7月24日,交易金额、整合时间表和数据处理政策仍未公开。接下来真正需要观察的,是Co-Star是否保持独立、Midjourney的视觉与视频模型何时接入,以及双方会如何处理存量用户数据授权。

    参考来源

    • iThome:Meta未来AI模型及产品将采用Midjourney技术:用于补充Midjourney在图像生成之外扩大技术合作范围的行业背景。
    • 知乎:福布斯Top 50 AI公司简析——Midjourney:用于了解Midjourney早期产品定位、商业模式和公司背景;其中历史信息需结合当前进展阅读。
  • Devin收编Poke,AI程序员开始学聊天

    Devin收编Poke,AI程序员开始学聊天

    Cognition以低位九位数美元估值收购聊天式AI助手Poke。交易指向编码Agent的新战场:模型能力之外,沟通方式、人格和长期协作体验正成为竞争壁垒。

    Cognition买下的不是聊天框,而是一套交互方法

    Cognition 在当地时间 7 月 24 日收购了聊天式 AI 助手 Poke,并计划将后者的对话风格与交互模型带入编码 Agent Devin。根据 TechCrunch 当天披露的信息,这笔交易对 Poke 的估值处于“低位九位数美元”区间,通常可理解为约 1 亿美元起步的数亿美元低端范围,但具体收购价格、现金与股权比例,以及团队整合方式均未公开。

    这笔交易最值得注意的不是金额,而是 Cognition 买下了一家并不以代码能力见长的公司。Poke 的核心卖点,是让用户像给朋友发消息一样与 AI 相处;Devin 的核心任务,则是理解代码库、使用终端、执行测试并交付 Pull Request。两者看起来相隔很远,实际上分别对应 Agent 产品的两端:一端负责把事情做完,另一端负责让人愿意持续把事情交给它。

    **编码 Agent 是能够自主规划并执行软件开发任务的 AI 系统。**它与传统代码补全工具的区别,不是一次生成更多代码,而是能连续完成读取仓库、修改文件、运行命令、检查测试结果、修复错误和汇报进度等多个步骤。Devin 从发布之初就试图扮演“AI 软件工程师”,Poke 则补上了这个角色长期以来相对薄弱的一环——如何像一名靠谱同事,而不是像一台等待提示词的远程机器。

    Devin 与 Poke 产品形态融合示意图,左侧为代码、终端和测试流程,右侧为聊天消息和主动提醒,中间汇合为长期协作型 AI Agent

    “人格”正在从装饰变成产品能力

    **AI 人格是模型在语气、主动性、反馈节奏、记忆方式和边界表达上呈现出的稳定交互特征。**这里的人格不是给机器人加几个表情,也不只是让回答更幽默,而是让用户能够预测它会怎样回应、什么时候追问、何时保持安静,以及遇到不确定性时会不会假装完成任务。

    Poke 对 Cognition 的价值,很可能在于它已经围绕这种可预测性建立了一套产品方法。一个聊天式助手如果要让用户像联系朋友一样频繁使用,就必须处理消息长度、回复时机、上下文延续、主动提醒和语气一致性;一个编码 Agent 如果要在数小时甚至数天的任务中获得信任,也必须解决同样的问题。两者使用的工具不同,但用户面对的心理问题一致:我能不能放心把事情交给它?

    交互质量对编码 Agent 尤其重要,因为软件开发任务天然充满歧义。用户说“把登录功能修一下”,背后可能涉及 OAuth 回调、Cookie 策略、移动端兼容、数据库迁移和回归测试。能力较弱的 Agent 会直接选一条路径开工,最后交付一个看似完整、实际偏题的补丁;协作能力更成熟的 Agent,则应该先确认影响范围,在关键决策点请求批准,并把技术风险翻译成用户可以快速判断的选项。

    人格在这里承担的是“协作协议”的作用。一个总是说“没问题”的 Agent 可能显得友好,却会掩盖失败概率;一个每执行一步都请求确认的 Agent 更安全,却会把自动化退化成高延迟聊天;一个长时间沉默、最后丢出数千行改动的 Agent,则很难进入严肃团队的生产流程。真正有用的人格,必须同时控制亲和力、确定性表达和打断频率。

    Devin需要的,正是“怎么说”这一层

    Devin 当前面对的竞争已经不只是“谁能写代码”,而是“谁更像一个可以管理的工程协作者”。Claude Code、Cursor Agent、GitHub Copilot 的 Agent 能力,以及 OpenAI 的 Codex 类产品,都在把文件编辑、终端执行、代码检索和测试修复变成基础配置。当底层模型可以被多个产品接入,单纯依靠模型跑分形成的领先往往难以长期维持。

    下面这张表更能说明 Poke 对 Devin 的潜在意义:

    | 产品形态 | 典型代表 | 主要交互方式 | 用户承担的角色 | 优势 | 当前短板 | |—|—|—|—|—|—| | 代码补全 | GitHub Copilot 早期形态 | 编辑器内逐行建议 | 驾驶员 | 延迟低、控制感强 | 难以独立完成长任务 | | AI 原生编辑器 | Cursor Agent | 编辑器聊天、Diff 与终端 | 驾驶员兼审核者 | 上下文贴近代码,修改反馈快 | 需要用户持续在线参与 | | 终端型编码 Agent | Claude Code 等 | 命令行对话与任务执行 | 技术负责人 | 工具调用直接,适合资深开发者 | 非技术干系人参与门槛高 | | 异步软件工程 Agent | Devin | Web、Slack、GitHub、工单系统 | 任务委派者与验收者 | 能并行处理任务,适合团队流程 | 长任务中的沟通与信任成本高 | | 朋友式聊天助手 | Poke | 消息式对话 | 对话参与者 | 低门槛、连续性和人格感强 | 缺少复杂工程执行能力 | | 融合后的潜在形态 | Devin+Poke | 消息委派、主动汇报、工程执行 | AI 工程经理 | 同时覆盖执行和关系维护 | 仍需解决权限、安全与可靠性 |

    Poke 带来的第一项能力,可能是更自然的任务澄清。优秀的工程师不会拿到一句模糊需求就立刻提交代码,而是会先找出缺失的验收标准。聊天式产品积累的追问策略可以帮助 Devin 区分哪些信息必须立即确认,哪些假设可以先记录后执行,从而减少用户在长提示词里一次性写完所有要求的负担。

    Poke 带来的第二项能力,可能是更合适的进度沟通。编码 Agent 的任务执行时间远长于普通聊天回答,用户真正需要的不是持续滚动的思维过程,而是几个可操作的状态:已经理解了什么、当前卡在哪里、是否需要人工决策、预计还要完成哪些步骤。把终端日志原样倾倒给用户不是透明,而是把信息整理工作重新推回给人类。

    Poke 带来的第三项能力,可能是跨任务的关系连续性。Cognition 过去已经强调知识库、长期记忆和可复用“剧本”,让 Devin 记住仓库结构、测试命令与团队规范。Poke 式交互如果被真正整合,记忆对象还会扩展到沟通偏好:某位负责人希望高风险修改先给方案,某个团队要求每次数据库变更附带回滚步骤,某个项目只在测试全部通过后才发送通知。

    这不是给Devin套一层聊天皮肤

    简单地把 Poke 的语气移植给 Devin,不足以解释一笔低位九位数美元估值的交易。聊天式 AI 的价值只有进入任务规划器、记忆系统和通知机制,才会转化为编码 Agent 的竞争力;如果整合结果只是让 Devin 的回复更像朋友,收购就会沦为昂贵的文案升级。

    真正的产品整合至少需要覆盖四层:

    1. 意图层:从自然对话中识别任务、优先级、约束条件和验收标准。
    2. 执行层:把对话中形成的共识映射为代码检索、文件修改、终端命令与测试流程。
    3. 沟通层:根据风险和任务阶段决定主动汇报、追问或静默执行。
    4. 记忆层:将稳定规则写入团队知识,而不是把每句话都永久保存。

    这四层中最难的不是生成一句自然回复,而是决定何时开口。Agent 如果在代码格式化、依赖安装等低风险步骤频繁询问,会破坏异步工作的意义;但当它准备修改数据库模式、删除生产资源或变更鉴权逻辑时,不请求确认又不可接受。人格必须与权限系统绑定,否则“像朋友”反而可能让用户降低警惕。

    这也是 Devin 与普通聊天机器人的根本差别。普通聊天出错,代价可能是一段错误信息;编码 Agent 出错,代价可能是不可编译的提交、供应链风险、数据损坏或线上事故。越自然的交互越容易制造信任,而越强的执行能力越要求系统主动限制这种信任。

    编码Agent竞争进入体验层,但能力仍是底座

    这笔收购释放出的行业信号,是编码 Agent 正在从功能竞赛进入协作体验竞赛。过去厂商重点展示的是能否解题、能否调用终端、能否在 SWE-bench 一类基准上修复真实仓库问题;现在更关键的问题变成了,用户能否同时管理 5 个、10 个甚至更多 Agent,而不被状态更新和失败重试淹没。

    基准成绩仍然重要,但它无法完整衡量团队使用体验。SWE-bench 是以真实 GitHub Issue 和代码仓库评估模型修复软件问题能力的基准,它适合测量任务是否解决,却很难衡量 Agent 是否在正确节点请求帮助、是否清楚披露了未解决风险,以及它的汇报能否让工程师在 30 秒内决定合并或退回。

    Poke 式交互可能让 Devin 更接近“工程经理界面”,而不只是“远程开发者界面”。未来用户未必需要盯着 Agent 的每一次文件修改,而是通过消息了解多个并行任务:支付模块正在等待测试环境,文档更新已经完成,性能优化发现了架构级问题,需要人类选择方案。此时聊天不再是执行入口之一,而会成为调度多个 Agent 的控制平面。

    模型能力依然决定这套体验是否成立。一个不会正确修改代码的 Agent,再友好也只是善于解释失败;一个经常误判测试结果的 Agent,主动汇报越多只会制造更多噪音。Cognition 收购 Poke 并不意味着编码能力已经解决,而是说明头部公司开始判断:在模型继续进步的同时,交互设计已经值得通过并购提前补齐。

    低位九位数估值,买的是时间和差异化

    低位九位数美元估值显示,Cognition 对交互资产的定价并不低。需要强调的是,“交易对 Poke 的估值”不等于 Cognition 支付了同等规模的现金,也不能据此推断 Poke 的收入水平;并购可能包含股票、留任激励、业绩条件和其他安排,在条款披露前不宜把估值直接写成成交现金价。

    Cognition 选择收购而不是内部复制,可能是因为聊天产品中的细节很难靠功能清单复刻。模型提示词、通知策略、用户研究、消息节奏和品牌语气看起来都不构成传统技术壁垒,但这些细节需要大量真实对话才能调到可用状态。对于需要快速扩大用户面的 Devin 来说,买下一支已经理解消费级 AI 交互的团队,比让工程 Agent 团队从头学习如何建立情感连续性更节省时间。

    这笔交易也可能帮助 Devin 走出纯开发者市场。异步编码 Agent 的直接用户虽然是工程师,但任务发起者还可能包括产品经理、设计师、客户支持和运营人员。消息式交互能够把“修改代码”包装成更容易委派的工作流,让非开发岗位提交问题、补充上下文并查看结果,而工程师继续负责架构、权限和最终审核。

    不过,拓宽用户面会同步放大错误需求进入生产流程的风险。产品经理一句“把退款限制放宽”,可能对应合规、财务和风控的多重约束;如果 Agent 只追求顺畅对话,就可能把组织内尚未达成共识的想法过早变成代码。融合后的 Devin 必须懂得识别权限边界,而不是把每个说得像需求的句子都当成待办事项。

    最大风险:越像同事,越容易被过度信任

    拟人化是 Poke 带给 Devin 的优势,也会成为整合后的主要风险。用户容易把稳定语气误认为稳定能力,把流畅解释误认为真实理解,还可能因为 Agent 表现得像熟悉团队的同事,而忽视其记忆过期、上下文缺失或工具调用失败。

    企业客户更关心的另一项风险是对话数据与代码权限的合并。聊天助手通常接触个人安排、沟通偏好和零散信息,编码 Agent 则可能接触私有仓库、工单、日志、云环境和部署系统。当两类上下文进入同一个记忆层,Cognition 必须提供清晰的数据隔离、保留期限、权限审计与删除机制。

    主动性同样需要明确边界。一个会主动发消息的生活助手通常只是提醒用户,一个会主动行动的编码 Agent 却可能创建分支、修改依赖或触发自动化流程。消息中的“你看着办”对人类同事已经足够含糊,对拥有工程权限的 Agent 更是危险指令。

    因此,Poke 与 Devin 的融合是否成功,不应只看回复是否更自然,而应看三组可量化指标:澄清后返工率是否下降、人工介入次数是否减少、关键风险漏报率是否降低。如果自然语言交互增加了消息数量,却没有提高任务一次完成率,这套“人格”就没有形成实际产品价值。

    判断:这是一次方向正确、执行难度很高的收购

    Cognition 收购 Poke 的方向是正确的,因为编码 Agent 的下一阶段确实不只是继续堆模型和工具。随着多家产品都能读写仓库、运行测试和生成 Pull Request,用户最终会选择那个最容易委派、最少制造管理负担、失败时最诚实的 Agent。

    这笔交易的真正考验,是 Cognition 能否把朋友式聊天转化为专业协作,而不是把 Devin 变得更会说话。工程团队需要的不是一个永远热情的 AI 同事,而是一个知道什么时候确认、什么时候执行、什么时候承认做不到的系统。

    短期内,Poke 不会直接让 Devin 的代码正确率跃升,也不会解决长上下文、复杂调试和生产事故定位等硬问题。它更可能降低使用编码 Agent 的“管理税”:减少提示词工程、压缩状态阅读时间,并让多个并行任务变得可控。

    长期来看,编码 Agent 与聊天式助手的边界会继续消失。聊天会成为委派和管理任务的界面,代码执行会成为聊天助手能够调用的专业能力,而人格则负责维持长期信任。Cognition 这次收购押注的,正是一个越来越明确的判断:当模型能力逐渐接近时,谁更懂得与人合作,谁才更有机会成为用户长期保留的那个 Agent。

    参考来源与延伸阅读

    • TechCrunch,2026 年 7 月 24 日报道:披露 Cognition 收购 Poke、交易估值口径及双方产品整合方向。受文末域名限制,此处不附站外链接。
    • Model Context Protocol Specification:MCP 官方规范仓库,可用于理解编码 Agent 如何以标准化方式连接外部工具与数据源。
    • SWE-bench:基于真实 GitHub Issue 评估模型与 Agent 软件工程能力的开源基准及工具仓库。
  • ChatGPT桌面端能听着干活了

    ChatGPT桌面端能听着干活了

    OpenAI 将 GPT-Live 语音模式接入 ChatGPT 桌面应用,用户可用一次对话启动、检查和调整 Chat、Work、Codex 中的多项后台任务。

    ChatGPT 桌面端能听着干活了

    OpenAI 在 7 月 24 日升级 ChatGPT 桌面应用,将 GPT-Live 语音模式接入 Chat、Work 和 Codex 三个板块。用户现在可以直接口述目标,在同一段对话中发起、检查和调整多项任务;当智能体在后台执行工作时,用户仍能继续交谈并追加要求。

    这次更新的重点不是“语音输入终于更自然”,而是 OpenAI 开始把语音放到智能体任务调度层。过去对 ChatGPT 说话,主要是在替代键盘;现在说出的内容可以变成多个持续运行的工作流,语音由此从输入法升级成了桌面应用的控制界面。

    GPT-Live 是 OpenAI 推出的全双工语音模型,可以在生成语音的同时继续接收和理解用户声音。 相比“用户说完、模型思考、模型回答”的回合制交互,全双工意味着 ChatGPT 不必等一方彻底结束才能处理下一步,用户也可以在回答过程中插话、纠正和改变方向。

    ChatGPT 桌面应用中的 Voice 界面,Chat、Work 与 Codex 多项任务在同一语音会话中并行推进

    一句话启动多个工作流

    多线程任务在这里指的是多个智能体工作流并行或交错推进,而不是计算机处理器层面的线程。 用户可以在一段语音对话中交代多个目标,ChatGPT 则把目标拆分到聊天、办公和编程环境中执行,并持续汇报各自进度。

    OpenAI 给出的典型场景是商务旅行准备。用户可以让 ChatGPT 同时检查日历中的时间冲突、扫描收件箱中的航班变更,并根据会议背景准备会议记录;在这些任务后台运行时,用户可以继续喝咖啡、整理行李,或者通过语音追加“把周二下午的客户会提前半小时”之类的新条件。

    单一对话成为了多个任务的统一控制面板。 用户不再需要分别打开日历、邮箱、文档和代码窗口,也不必为每个任务创建一段孤立提示词,而是可以像向一名助理交代工作一样,在同一个上下文中持续补充优先级、截止时间和输出格式。

    新版桌面应用目前围绕三个任务入口组织能力:

    • Chat 是通用对话与信息处理空间。 它适合讨论需求、检索上下文、解释结果,以及对其他任务进行追问。
    • Work 是面向办公交付物的智能体。 它可以利用获准访问的应用、文件、浏览器和业务上下文,制作报告、文档、演示文稿、电子表格及网站。
    • Codex 是面向软件开发的智能体。 它负责理解代码库、拆解工程任务、修改代码、检查执行结果,并根据用户反馈继续迭代。

    语音模式把三个入口串成了一条连续工作流。 例如,用户可以先在 Chat 中讨论一次产品发布,再让 Work 整理发布简报和演示文稿,随后要求 Codex 修复演示环境里的一个问题;整个过程中,用户不必反复复制背景资料,也不必在多个窗口里重新解释目标。

    GPT-Live改变的是对话节奏

    GPT-Live 与早期 ChatGPT Voice 的根本差别是语音处理链路从串联管线走向原生、持续的音频交互。 2024 年前后的初代方案需要先把语音转成文字,再由大语言模型生成文本答案,最后把文本合成为语音;三段模型依次运行,信息与延迟都会在链路中累积。

    OpenAI 后来推出的 Advanced Voice Mode 把音频理解和生成整合到一个模型中,减少了模型切换造成的等待,也能感知部分语调、停顿和情绪信息。不过,这类系统仍然以离散回合为基本单位,本质上还是“你说一轮、我答一轮”。

    GPT-Live 的全双工机制让“听”和“说”能够重叠发生。 这更接近人类会议中的交流方式:用户听到方向不对时可以立刻打断,模型也能根据一句话中途出现的修正更新后续回答,而不必先把已经计划好的整段内容播完。

    | 语音方案 | 处理方式 | 交互单位 | 能否自然打断 | 适合场景 | |—|—|—|—|—| | 初代 ChatGPT Voice | 语音转文字、语言模型、文字转语音三模型串联 | 完整问答回合 | 能力有限,通常需等待阶段切换 | 语音问答、朗读、简单指令 | | Advanced Voice Mode | 单模型直接处理和生成音频 | 离散语音回合 | 支持打断,但仍有明显轮次 | 陪练、头脑风暴、实时讲解 | | GPT-Live | 全双工语音理解与生成 | 持续对话流 | 可边听边说、随时纠正 | 长流程任务调度、多智能体协作 |

    OpenAI 尚未在本次公告中披露统一的毫秒级延迟数据。 因此,外界目前无法用“延迟从多少降到多少”来量化 GPT-Live 的提升,实际体验还会受到网络状况、设备拾音、工具调用耗时及后台任务复杂度影响。全双工解决的是交互机制,不代表所有任务都会立即完成。

    真正有用的是“边聊边执行”

    边聊边执行是这次更新最值得关注的产品能力。 传统语音助手通常在收到指令后完成一个短动作,例如设置提醒、查询天气或播放音乐;新版 ChatGPT 桌面端面对的则是持续数分钟甚至数小时的开放任务,其中包含信息搜集、计划制定、工具调用、结果检查和用户审批。

    用户可以在后台任务运行时继续与 ChatGPT 交流,这意味着对话不再被一次工具调用锁死。假设 Codex 正在检查一个大型代码库,用户仍可让 Work 根据产品文档先准备发布说明;如果邮箱扫描发现航班取消,ChatGPT 也可以主动把这一变化带回当前语音会话,而不是等所有步骤结束后一次性报告。

    这种交互方式更像项目经理与执行团队之间的站会。 用户负责给出目标、判断和优先级,ChatGPT 负责拆分任务、汇总上下文并推进执行;遇到权限、歧义或高风险动作时,系统再请求用户确认。它比逐条填写提示词更省操作,但也要求模型准确区分“讨论一个想法”和“授权执行一个动作”。

    ChatGPT Work 在这套结构中承担了办公智能体的角色。根据 OpenAI 的产品说明,Work 能连接应用、文件、浏览器及经批准的业务上下文,并可利用超过 1,400 款插件获取资料;它还能在计划模式中先提出问题、生成执行方案,得到批准后再正式推进。

    桌面应用是这套能力比网页聊天更合理的载体。 本地文件、当前窗口、浏览器标签页和开发环境都天然集中在桌面端,ChatGPT 可以在用户明确授权后获得更完整的任务上下文。对于需要同时处理代码、邮件、表格和会议资料的工作,桌面端也更适合展示多个并行任务的状态。

    它还不是可以完全放手的AI员工

    GPT-Live 提升了下达指令的效率,但没有自动消除智能体执行中的可靠性问题。 语音表达通常比文字更随意,代词、省略句和临时改口也更多;一旦这些模糊信息被直接转化为邮件发送、日程修改或代码变更,错误的成本会高于普通聊天中的一次答非所问。

    权限边界会决定这项功能能否真正进入企业环境。日历、邮箱、Slack、客户管理系统和代码仓库包含大量敏感数据,组织需要知道 ChatGPT 访问了哪些信息、调用了什么工具、改变了哪些内容,以及谁批准了高风险步骤。

    成熟的多任务语音智能体至少需要三层保护。 第一层是执行前展示计划,让用户确认目标和关键步骤;第二层是对发送邮件、修改生产代码、创建外部分享链接等动作设置明确审批;第三层是保留可审计的任务记录,使用户能够追溯并撤销变更。

    GPT-Live 本身也面临语音模型特有的安全问题。OpenAI 在系统卡中重点讨论了自伤、精神病性症状与躁狂、对 AI 的情感依赖、暴力和性内容等风险;全双工和更拟人的声音可能增强陪伴感,也更容易让部分用户高估模型的理解能力和判断资格。

    越像真人的交互越需要清楚展示机器边界。 GPT-Live 可以更自然地回应停顿和打断,但这不等于它拥有稳定的人类意图理解,更不等于它应该替代医疗、法律或财务专业人员作出高风险决定。

    与竞品相比,OpenAI在抢桌面入口

    这次更新的竞争焦点不是谁的语音最像真人,而是谁能把语音、上下文和执行工具连成闭环。 单独的语音合成质量已经很难构成长期壁垒,真正决定产品价值的是模型听懂需求后能否访问正确资料、调用正确工具,并交付可检查的成果。

    | 产品能力 | 普通语音助手 | 通用语音聊天机器人 | GPT-Live桌面工作流 | |—|—|—|—| | 主要目标 | 执行单步设备指令 | 回答问题和陪伴对话 | 调度并推进复杂任务 | | 上下文范围 | 设备与少量账户数据 | 当前聊天与上传内容 | Chat、Work、Codex及获准连接的工具 | | 任务持续时间 | 通常为秒级 | 通常为单次会话 | 可在后台持续运行 | | 多任务能力 | 以逐条指令为主 | 可讨论多个问题 | 可从单一会话启动多个工作流 | | 用户角色 | 发出命令 | 提问与追问 | 设定目标、审批计划、调整优先级 |

    OpenAI 的优势在于已经把通用对话、办公智能体和编程智能体放进同一个桌面产品。它的短板也同样明显:任务越多,状态管理越复杂;工具连接越广,授权和审计压力越大;语音越自然,用户越可能在未仔细检查的情况下批准模型建议。

    这项更新更像工作方式的预告,而不是已经成熟的终点。 如果 ChatGPT 能稳定处理任务依赖、冲突和失败恢复,语音会成为比侧边栏更高效的智能体入口;如果它频繁听错对象、遗漏约束或在多个工作流之间混淆上下文,所谓多线程只会制造更多需要人工收拾的半成品。

    价格与上线范围仍需继续观察

    OpenAI 截至 7 月 24 日没有在本次公告中公布 GPT-Live 桌面集成的独立价格。 官方信息显示相关能力正在逐步推送,但不同套餐可用的模型额度、后台任务数量、语音时长和工具权限仍可能存在差异,用户应以客户端实际显示为准。

    GPT-Live 同期也在 ChatGPT 的 iOS、Android 和网页端面向全球用户推出,而桌面应用的特殊价值在于进一步打通 Chat、Work 和 Codex。由于功能采用逐步发布方式,即使使用同一套餐,不同账号看到入口的时间也可能不同。

    开发者和深度用户最应该观察的是四个指标。 这些指标比声音是否自然更能判断它能否用于正式工作:

    1. 打断后的上下文修正率: 用户改口后,已经启动的任务能否同步更新约束。
    2. 并行任务的隔离性: 邮件、文档和代码任务是否会错误共享不相关信息。
    3. 审批机制的颗粒度: 用户能否只批准某一步,而不是一次性放开整个流程。
    4. 失败后的恢复能力: 某个工具超时或权限不足时,其他任务能否继续,并给出清晰状态。

    ChatGPT Voice 这次终于不只是“用嘴聊天”,而是开始“用嘴管理工作”。 GPT-Live 让对话更连续,Work 和 Codex 让对话能够落到具体交付物上,桌面应用则提供了连接本地环境的入口;三者组合起来,才构成 OpenAI 所说的“口述需求,快速推进多项任务”。

    最终决定这项功能价值的不会是演示中那杯咖啡,而是用户回来后能否得到三份准确、可审查且没有越权的成果。就目前的产品方向看,它是 ChatGPT 从聊天工具走向通用桌面智能体的重要一步;但在可靠性、权限控制和可审计性得到真实工作场景验证之前,最合适的定位仍是“能干活的协作者”,而不是可以无人监督的 AI 员工。

    参考来源

    • IT之家:OpenAI ChatGPT 桌面应用上线语音模式 —— 介绍 GPT-Live 接入桌面应用,以及通过语音推进 Chat、Work、Codex 多项任务的更新信息。
  • Gemini 3.5 Pro迟到数月

    Gemini 3.5 Pro迟到数月

    谷歌最强旗舰模型Gemini 3.5 Pro据称已延期数月,编码能力未达预期只是表层原因,人才流失、组织内耗与军方合作争议正在同时拖慢DeepMind。

    谷歌的下一代旗舰模型,仍然没有等来发布日期

    截至北京时间 2026 年 7 月 24 日,谷歌尚未发布被视为下一代旗舰模型的 Gemini 3.5 Pro,而多家媒体援引内部人士称,其开发进度已经落后原计划数月。

    Gemini 3.5 Pro 是谷歌正在开发的新一代高性能通用模型,目标是承担复杂推理、代码生成、多模态理解和企业级智能体任务。 彭博社此前报道称,该模型未能按照原计划推进;Axios 最新采访的六位谷歌 DeepMind 现任及前任员工则表示,员工士气低落、人才流失和内部争议也是延期的重要原因。

    谷歌并未公开确认 Gemini 3.5 Pro 的最终发布日期,也没有发布模型参数、基准测试成绩和正式价格。这意味着,外界目前只能确认旗舰模型缺席,无法通过公开跑分判断它究竟比竞争对手落后多少。

    Gemini 3.5 Pro 的问题已经不只是一次普通跳票,而是谷歌能否维持前沿模型迭代速度的压力测试。 对一家拥有自研 TPU、全球级数据中心、搜索数据和顶尖研究团队的公司来说,算力与资金都不是最稀缺的资源;真正稀缺的是让研究、产品、安全和商业团队在同一时间表下完成交付的组织能力。

    谷歌DeepMind办公楼与Gemini标志,画面中央是一条不断向后延伸的产品发布时间线

    延期数月,编码能力据称是直接瓶颈

    AI 编码能力是指模型理解代码库、生成和修改程序、定位缺陷并完成软件工程任务的综合能力。 它与回答一道算法题不同,更接近让模型进入真实项目,在多个文件、依赖关系、测试用例和运行环境之间连续工作。

    据彭博社此前援引十位现任及前任谷歌员工的报道,Gemini 3.5 Pro 的直接瓶颈之一是编码表现未达到内部预期。谷歌在 6 月底更新了训练数据,希望改善代码生成效果,但内部测试结果据称仍不理想。

    编码能力已经从模型发布会上的展示项目,变成前沿模型最重要的商业入口之一。 企业愿意为代码智能体付费,不是因为它能补全一行函数,而是因为它可以阅读仓库、调用工具、执行测试、修复错误,再根据测试结果继续迭代。这个场景要求模型同时具备长上下文理解、规划、工具使用和低错误率,任何一项短板都会被放大。

    谷歌面临的难题是,旗舰模型不能只在少数榜单上追平对手,还必须在真实软件工程流程中保持稳定。 如果模型生成一段代码的成功率是 90%,看上去已经很高;但一个任务若需要连续完成十个相互依赖的步骤,理论上的全流程成功率只有约 35%。前沿模型厂商因此越来越重视多步执行和错误恢复,而不只是单轮代码生成。

    目前没有公开证据表明 Gemini 3.5 Pro 在某个具体编码基准上落后多少。谷歌没有发布 SWE-bench、Terminal-Bench 或内部软件工程评测数据,媒体报道也没有给出可复核的分数,因此把“落后数月”直接等同于“性能落后几代”并不严谨。

    发布日期的落后仍然会转化为产品层面的落后。 模型晚发布一个月,意味着开发者反馈、企业部署、智能体适配和推理优化也晚一个月;当竞争对手以数周为周期更新时,数月延期足以让对方完成一轮模型、工具链和客户案例的闭环。

    小模型持续更新,反而放大了旗舰缺席

    轻量模型是以较低推理成本和更短响应时间为目标,主动牺牲部分复杂任务能力的模型。 谷歌近期仍在推进 Gemini 3.6 Flash、Gemini 3.5 Flash-Lite,以及面向网络安全任务的 Gemini 3.5 Flash Cyber,说明 DeepMind 的模型发布管线并未完全停摆。

    小模型能够守住调用量,却无法替代旗舰模型建立技术上限。 Flash 类模型适合高并发客服、信息抽取、内容审核和简单代码辅助,但企业在复杂编程、科研分析和自主智能体场景中,首先比较的仍是各家的最强模型。

    | 模型或产品线 | 当前状态 | 主要定位 | 编码与复杂推理 | 价格信息 | 现阶段判断 | |—|—|—|—|—|—| | Gemini 3.5 Pro | 据称延期数月,尚未正式发布 | 谷歌下一代旗舰模型 | 据报道未达到内部预期,暂无公开跑分 | 尚未公布 | 决定谷歌能否守住第一梯队上限 | | Gemini 3.6 Flash | 已推出或进入市场投放阶段 | 低延迟、高吞吐任务 | 更强调效率,不以最高能力为首要目标 | 以谷歌正式页面为准 | 能补充产品线,不能替代 Pro | | Gemini 3.5 Flash-Lite | 已推出或进入市场投放阶段 | 成本敏感型批量任务 | 适合结构化处理和轻量生成 | 公开资料未在本次报道中统一列明 | 有利于规模化使用,但难承担复杂智能体 | | Gemini 3.5 Flash Cyber | 面向网络安全的专用版本 | 安全分析与相关工作流 | 侧重垂直领域,而非通用能力上限 | 尚无完整可比价格数据 | 场景明确,但市场范围有限 | | OpenAI、Anthropic旗舰模型 | 持续迭代 | 通用推理、编码与智能体 | 已成为谷歌内部比较对象 | 各家计费结构不同 | 在开发者心智和企业编程场景中施压谷歌 | | Meta AI模型体系 | 持续推进 | 模型能力、开放生态及消费级入口 | 竞争重点因产品而异 | 无法与闭源旗舰直接按单一价格比较 | 高管公开嘲讽反映竞争气氛升温 |

    表格中没有填写未经官方确认的基准分数,也没有把不同上下文长度、缓存机制和推理模式下的价格强行换算。模型比较只有在任务、输入输出规模和推理预算一致时才有意义,单看一个总榜名次很容易得出错误结论。

    Meta AI 负责人 Alexandr Wang 已在 X 上用“Gemini?没听说过”公开调侃谷歌,其他竞争对手也在追问更强模型何时就绪。高管间的口水战没有技术含量,但它说明谷歌正在丢失一种更重要的资产:市场默认其下一次发布会带来领先模型的预期。

    技术问题背后,是谷歌式组织内耗

    组织内耗是多个团队在目标、资源和决策权上相互牵制,最终降低整体交付速度的状态。 对谷歌来说,训练出一个强模型只是第一步,模型还要进入搜索、云服务、Android、YouTube、Workspace 和开发者工具,任何一条产品线都可能提出不同的成本、安全与发布时间要求。

    前员工将推动谷歌各部门朝同一方向前进,形容为“把整个海洋的水烧开”。这个比喻并不夸张:Google Cloud、DeepMind 和 Android 团队都在开发面向程序员的 AI 工具,部分消费者产品团队也参与其中,重叠项目会争夺相同的算力、人才和内部渠道。

    重复造轮子的问题不在于谷歌缺少项目,而在于太多项目都希望成为统一入口。 一个团队希望模型优先服务云客户,一个团队要求它与 Android 深度结合,另一个团队则要保护搜索广告的用户体验;这些目标单独看都合理,放在同一发布日期前就会互相冲突。

    内部算力竞争也会拖慢实验节奏。谷歌虽然拥有自研 TPU 和庞大的数据中心,但前沿训练、后训练、评测以及产品推理都在争夺高端计算资源;当研究人员无法快速重复实验时,训练数据更新后的负面结果就更难被及时定位。

    谷歌早期对内部代码使用生成式 AI 的谨慎政策,也可能让它错过了一部分产品反馈窗口。 出于专有代码保护和训练数据治理考虑,谷歌一度限制员工用 Gemini 编写或分析内部代码,相关政策后来有所放宽,但组织级使用习惯不会随着一条政策立即改变。

    联合创始人谢尔盖·布林一直在推动 AI 编程产品提速,谷歌首席 AI 架构师 Koray Kavukcuoglu 也在尝试统一内部工具,DeepMind 还组建了专门的 AI 编程团队。这些调整方向是对的,但组织重构的见效周期通常比模型训练周期更长,难以立刻解决 Gemini 3.5 Pro 的发布时间问题。

    军方合作争议正在消耗员工士气

    谷歌与美国国防部的合作协议,是本轮 DeepMind 员工不满的另一条导火索。 据 Axios 报道,谷歌在 2026 年 4 月达成了一项允许美国军方使用其技术的协议,多名员工在离职面谈中提到了这项合作。

    一位知情人士将内部争议描述为一场“持续的战斗”,并称其造成了“情感上的倦怠”。DeepMind 前研究科学家 Alex Turner 也表示,自己因谷歌的军事合同而辞职。

    军事合作争议对模型进度的影响不是某段训练代码突然失效,而是团队信任和人员稳定性下降。 前沿模型项目高度依赖经验积累,负责数据、架构、评测和后训练的核心研究员很难被即刻替代;一个关键成员离开,可能让多个实验失去上下文。

    DeepMind CEO Demis Hassabis 最近发布了新的 AI 安全框架,但有前员工认为,他在公司内部的可见度不如部分竞争对手 CEO。安全框架能够明确模型风险边界,却不能自动解决员工对技术最终用途的道德分歧。

    谷歌曾因 Project Maven 等军事项目遭遇过类似内部反弹,因此这并不是一个全新的管理问题。不同之处在于,2026 年的顶尖 AI 人才拥有更多选择,研究员可以转向 OpenAI、Anthropic 或其他资金充足的实验室,员工不满更容易迅速变成人才流失。

    顶尖研究员离职,比一次延期更难修复

    人才流失是谷歌当前最具长期破坏性的风险。 据相关报道,Gemini 联合负责人 Noam Shazeer 已离开谷歌并加入 OpenAI,AlphaFold 核心研究者、诺贝尔化学奖得主 John Jumper 则转投 Anthropic。

    今年 6 月,Gemini 核心研发人员 Jonas Adler 和 Alexander Pritzel 也被报道离职并加入 Anthropic。这些人员变动的重要性不只体现在履历,而在于他们掌握模型训练过程中大量不会完整写入文档的隐性知识。

    前沿模型开发不是按人数线性扩张的工程。新增十名研究员未必能立刻替代一名熟悉训练失败模式、数据配比和评测漏洞的核心成员;新员工需要先理解已有实验,再建立对内部基础设施的判断,补位周期往往以月计算。

    人才流动还会形成自我强化。 当研究员认为项目落后时,更容易接受竞争对手邀请;核心人员离开后,剩余团队的负担加重,模型进度进一步受影响;进度继续延误,又会让更多人怀疑项目方向。

    1900亿美元支出,让延期变成财务问题

    AI 资本开支是科技公司为数据中心、芯片、网络和电力基础设施投入的长期资金。 谷歌最新一季财报超过市场预期,但报道指出,公司自由现金流已经转为负值,重要原因之一正是持续增加的 AI 投资。

    谷歌 2026 年总支出预计达到 1900 亿美元。这个数字不应被简单理解为全部用于训练 Gemini,也不应与单一季度资本开支混为一谈,但它足以说明市场对投资回报的要求正在迅速提高。

    彭博行业研究分析师 Mandeep Singh 表示,谷歌云业务收入增长 82%,搜索业务收入则略低于华尔街预期。云业务高增长证明 AI 基础设施确实存在需求,但搜索低于预期会放大投资者对核心业务被 AI 改写的担忧。

    | 财务与业务指标 | 最新报道口径 | 对 Gemini 3.5 Pro 的含义 | |—|—:|—| | 谷歌 2026 年预计总支出 | 1900 亿美元 | 模型延期会加大市场对投入效率的质疑 | | 谷歌云业务收入增速 | 82% | AI 计算需求强劲,基础设施仍具商业回报 | | 自由现金流 | 已转为负值 | 投资者将更关注模型和产品何时兑现收入 | | 搜索业务表现 | 略低于华尔街预期 | 谷歌必须证明 Gemini 能增强而非侵蚀搜索业务 |

    Alphabet 股价此前也对延期报道作出明显反应,相关消息出现后盘中一度跌逾 3%,当日最终收跌 4.44%。股价波动不能证明一个未发布模型的能力,但能反映资本市场已经把 Gemini 3.5 Pro 当作衡量谷歌 AI 执行力的指标。

    谷歌还没有掉队,但容错空间正在缩小

    谷歌仍然拥有其他实验室难以复制的全栈优势。 从 TPU、数据中心到搜索、Android、Chrome、YouTube 和 Workspace,谷歌可以把模型同时部署到消费端、企业端和开发者端,并通过真实产品获得高频反馈。

    Gemini 在多模态输入、搜索信息整合和超大规模分发方面仍有明显基础,谷歌云的增长也说明企业没有停止购买其 AI 基础设施。下一代 Gemini 4 据称已经启动训练,因此 Gemini 3.5 Pro 延期并不等于谷歌的前沿模型路线中断。

    谷歌真正落后的可能不是某一项模型能力,而是把研究成果变成稳定产品的速度。 OpenAI 和 Anthropic 的组织更聚焦,可以围绕单一模型快速调整产品和商业策略;谷歌每次升级都必须考虑多个业务部门以及数十亿用户的兼容问题。

    谷歌选择不发布一个内部评测不过关的旗舰模型,本身并不是错误。相比带着明显缺陷仓促上线,延期并继续训练通常更负责任,尤其是旗舰模型会直接进入企业代码库和自动化工作流。

    延期的合理性取决于它最终换来了什么。 如果 Gemini 3.5 Pro 上线后在真实编码、复杂推理和智能体执行上形成可感知优势,几个月等待可以被视为质量控制;如果模型只是在公开榜单上小幅追平对手,延期就会被解释为组织效率下降。

    对开发者而言,当前不应为未发布模型暂停选型

    开发者现阶段不应根据传闻为 Gemini 3.5 Pro 预留关键项目档期。 模型尚无确定发布日期、正式价格、上下文规格和可复核跑分,任何围绕它制定的迁移计划都缺乏稳定依据。

    企业更合理的做法是使用自己的真实任务集持续评估现有模型。代码场景至少应覆盖仓库级理解、跨文件修改、测试通过率、工具调用成功率、响应延迟和单任务总成本,而不是只比较厂商提供的静态榜单。

    谷歌需要用正式发布回答三个问题:模型是否足够强、推理是否足够稳定、价格是否足以支撑规模化部署。 其中任何一个问题没有清晰答案,Gemini 3.5 Pro 都很难扭转市场对谷歌“再次掉队”的判断。

    截至 7 月 24 日,最稳妥的结论仍然是:Gemini 3.5 Pro 确实处于外界预期之外的延期状态,但谷歌的技术落后幅度尚无公开数据可以量化。比模型跑分更明确的信号,是人才、组织、文化和资本压力正在同一时间挤压 DeepMind 的交付能力。

    参考来源

    • IT之家:谷歌旗舰大模型难产背后,军方合作引员工不满 —— 汇总 Axios、彭博社报道,涉及模型延期、员工士气、人才流失与谷歌财务数据。
    • 知乎:Gemini 3.5 Pro 难产,谷歌跌入失望陷阱 —— 对 Gemini 3.5 Pro 延期及编码能力瓶颈的补充分析。
  • Genie走进微软办公流

    Genie走进微软办公流

    Databricks 将把 Genie 接入 Microsoft 365 Copilot,让员工在 Teams 等办公入口直接查询企业数据。真正的价值不在聊天界面,而在身份、权限与数据治理能否原样延伸到办公工作流。

    Genie 走进微软办公流:企业数据分析助手不再困在 BI 后台

    Databricks 正在把 Genie 接入 Microsoft 365 Copilot,企业员工未来可以在 Teams 等日常办公入口中,直接用自然语言查询 Databricks 里的业务数据。7 月 23 日,Databricks 宣布将与微软的战略合作延长至 2030 年代,并扩大 Azure Databricks、Microsoft 365、Power Platform、Copilot Studio 以及 Azure Cobalt 之间的整合。

    这次更新的重点不是给 Databricks 再增加一个聊天窗口,而是让数据分析能力进入企业已经在使用的办公工作流。销售负责人不必打开 BI 仪表盘,供应链经理也不必先找到数据分析师,他们可以在 Microsoft 365 Copilot 或 Teams 中直接追问:华东区本周收入为什么下降、哪些 SKU 的库存风险最高、上季度续费率变化来自哪些客户群。

    **Databricks Genie 是一套面向企业数据的自然语言分析助手。**它把用户问题转换为对企业数据的分析过程,并结合数据表、字段、指标定义和业务语义生成回答。与通用聊天机器人不同,Genie 的核心对象不是互联网知识,而是被 Databricks 管理和授权的内部数据。

    Databricks Genie 通过 Copilot Studio 接入 Microsoft 365 Copilot 和 Teams,并连接 Unity Catalog 与企业数据的架构示意图

    不是把数据复制给 Copilot,而是把 Genie 变成可调用的企业 Agent

    这项集成更接近“Agent 调用 Agent”,而不是把 Databricks 数据整体导入 Microsoft 365。Microsoft 365 Copilot 承担用户入口和任务编排,Genie 负责理解数据问题、访问获准的数据资产并返回分析结果,底层数据仍由 Databricks 的数据平台和治理体系管理。

    微软与 Databricks 的官方文档显示,目前有两条主要接入路径:第一条是在 Microsoft Teams 中安装 Databricks Genie 应用,再从 Microsoft 365 Copilot 中选择 Genie;第二条是先从 Databricks 建立到 Microsoft Power Platform 的连接,再通过 Copilot Studio 连接 Genie Agents,并将其发布到相应办公场景。

    **Copilot Studio 是微软用于构建、连接和发布企业智能体的低代码平台。**它在这套架构中扮演编排层,负责把 Microsoft 365 中的用户请求交给 Genie,而不是替代 Genie 的数据分析能力。

    两条接入路径对应不同的企业需求:

    1. **Teams 应用路径更适合快速部署。**企业可以把 Genie 放进员工已经使用的沟通界面,减少切换系统的成本。
    2. **Copilot Studio 路径更适合流程化集成。**企业可以把 Genie 与审批、通知、客户服务或内部知识助手组合,而不只是提供一个独立聊天入口。
    3. **Power Platform 连接更适合已有微软低代码体系的组织。**这类企业通常已经使用 Power Automate、Power Apps 或 Copilot Studio,Genie 可以成为其中一个受控的数据分析节点。

    这也意味着,所谓“接入 Microsoft 365”并不等于 Genie 立刻成为 Word、Excel、Outlook 中无处不在的原生按钮。现阶段官方明确描述的主要交互入口是 Microsoft 365 Copilot、Teams 应用以及通过 Copilot Studio 发布的 Agent;企业能否在具体 Office 应用中调用,还取决于管理员配置、租户策略、产品许可与微软侧的功能开放范围。

    最关键的变化是权限可以跟着用户走

    企业数据助手真正难解决的问题不是自然语言转 SQL,而是“谁有权问什么”。一个能回答收入、员工薪酬、客户名单和供应链成本的机器人,如果只用统一服务账号访问数据库,就可能把原本隔离的数据暴露给不该看到的人。

    **企业 OAuth 是将用户身份和授权关系带入外部应用的企业级认证机制。**Databricks 表示,Genie 可以通过企业 OAuth 对来自 Teams、Copilot Studio 或自定义应用的会话进行认证,让每次对话对应到具体用户,而不是让所有请求共享一个高权限账号。

    **Unity Catalog 是 Databricks 用于统一管理数据、AI 资产、权限和审计的治理层。**Genie 会遵循用户已有的 Unity Catalog 权限,只访问该用户能够访问的数据;如果一名区域经理没有查看全国客户明细的权限,把问题换成自然语言也不会自动绕过限制。

    这套身份链路至少要完成四件事:

    • Microsoft 365 能识别当前发起请求的员工;
    • Copilot Studio 或 Teams 应用能够把身份安全地传递给 Databricks;
    • Databricks 能依据该身份执行对应的数据权限;
    • 查询、回答和工具调用能够进入企业审计记录。

    权限继承是这次集成最有价值、也最容易被低估的部分。过去企业把聊天机器人接到数据库时,往往需要重新开发登录、权限映射、凭证保管和审计逻辑;如果 OAuth、Copilot Studio 与 Unity Catalog 能完整衔接,部署团队可以少造一套身份系统。

    但权限正确不代表答案正确。Genie 即使只能看到获准的数据,仍可能因为指标定义含糊、表之间关系错误、数据更新延迟或自然语言歧义,给出逻辑上合理、业务上错误的结论。

    Genie 与 Microsoft 365 Copilot 各自负责什么

    Microsoft 365 Copilot 和 Databricks Genie 并不是同一种产品。前者理解邮件、会议、文档和组织协作上下文,后者理解企业数据平台中的表、指标和业务语义,两者组合后才可能完成从“发生了什么”到“为什么发生”的跨系统分析。

    | 产品 | 核心定位 | 主要数据范围 | 典型入口 | 治理基础 | 独立新增价格 | |—|—|—|—|—|—| | Databricks Genie | 自然语言企业数据分析 | Lakehouse 中的表、指标及语义信息 | Databricks、Teams、Microsoft 365 Copilot、Copilot Studio | Unity Catalog、企业 OAuth | 本次合作未公布独立售价 | | Microsoft 365 Copilot | 办公内容理解与任务协作 | 邮件、会议、文档及 Microsoft Graph 上下文 | Teams、Word、Excel、Outlook 等 | Microsoft 365 租户权限与合规体系 | 取决于微软现有许可方案 | | Power BI Copilot | 面向报表和语义模型的辅助分析 | Power BI/Fabric 语义模型与报表 | Power BI、Microsoft Fabric | Fabric 与 Power BI 权限体系 | 取决于容量和许可配置 | | Snowflake Cortex Analyst | Snowflake 数据的自然语言查询 | Snowflake 中的数据与语义模型 | Snowflake 及企业自建应用 | Snowflake 角色与数据治理 | 取决于 Snowflake 用量与产品配置 |

    Databricks Genie 相比 Power BI Copilot 的优势在于,它更靠近 Lakehouse 中的原始数据、工程管道和统一治理层。对于数据已经集中在 Databricks、但消费入口分散在 Teams、门户和内部应用中的企业,Genie 可以减少为每个入口重复建设问答逻辑的工作。

    Power BI Copilot 的优势则是成熟的报表消费环境和微软 BI 用户基础。企业如果已经围绕 Power BI 语义模型完成指标治理,并不一定需要为了自然语言问答再引入 Genie;反过来,如果大量分析发生在 Databricks SQL、数据科学工作流和 Lakehouse 表上,Genie 与数据资产的距离更近。

    Snowflake Cortex Analyst 与 Genie 的竞争逻辑类似,双方都试图把自然语言问题映射到可信的企业指标和查询。它们之间的差别最终不只取决于模型效果,而取决于企业的数据放在哪里、权限体系由谁管理,以及语义层是否已经建设完成。

    办公入口会扩大数据分析的用户规模

    Genie 进入 Microsoft 365 后,最直接的受益者不是数据工程师,而是没有 SQL 能力的业务负责人。数据团队过去需要处理大量重复问题,例如按地区拆分销售额、解释某周转化率变化、查询库存覆盖天数,这些任务技术难度不高,却不断占用分析资源。

    销售场景可以体现这种变化。区域负责人可以在 Teams 讨论业绩时直接询问 Genie:本月目标完成率低于 80% 的客户经理有哪些,并继续追问这些人员的商机数量、平均成交周期和重点流失客户,而不必在会议后再提交取数需求。

    供应链场景更适合连续追问。运营人员可以先找出未来两周可能缺货的产品,再按供应商、仓库和预计收入影响拆分,最后让工作流把高风险项目发送给对应负责人;Genie 提供数据解释,Copilot Studio 负责后续通知和流程动作。

    财务场景则会更谨慎。预算执行、成本拆分和现金流数据通常涉及行列级权限、敏感字段和严格口径,企业需要先定义“收入”“毛利”“活跃客户”等指标,再允许 Genie 面向更大范围员工开放。

    真正的生产力提升不会来自少点两次鼠标,而会来自分析等待时间的缩短。过去一个跨部门数据问题可能要经历提需求、确认口径、排期、写 SQL 和制作报表;进入办公流后,简单问题可以在对话中完成,分析师则集中处理因果判断、实验设计和复杂建模。

    语义层质量决定 Genie 是助手还是“数据幻觉机”

    自然语言分析的准确率上限由企业的数据语义质量决定。模型可以理解“找出高价值客户”,但数据库里可能同时存在按收入、利润、生命周期价值和续费概率定义的四种高价值客户,缺少明确口径时,再强的模型也只能猜。

    企业部署 Genie 前至少需要补齐三类信息:

    • **业务术语定义:**明确收入、订单、客户、流失等核心概念的计算规则;
    • **数据关系说明:**标记表之间的连接方式、时间字段和主键,避免重复计算;
    • **可信查询示例:**提供经过验证的问题和查询逻辑,让 Genie 学会组织内部的表达方式。

    Genie 的价值因此与数据团队前期投入成正比。指标体系清晰、Unity Catalog 权限完整、表描述充分的企业,上线后更容易获得稳定回答;数据表命名混乱、同一指标存在多个版本的企业,只会把原有数据债务包装成更自然的语言。

    回答可验证性同样重要。企业数据助手不能只输出一段看似专业的结论,还应让用户确认所用数据范围、时间窗口、筛选条件和指标定义;涉及经营决策时,用户还需要能够追溯到对应的数据资产或查询过程。

    安全边界不应只停留在“有权限”

    企业 OAuth 和 Unity Catalog 解决的是访问控制,但不能覆盖智能体系统的全部风险。Genie 进入办公流后,用户发起查询的频率和范围都会扩大,数据泄露、提示注入、错误汇总和敏感信息被复制到聊天记录中的风险也会随之上升。

    企业管理员需要额外关注以下问题:

    1. **聊天结果保存在哪里。**查询结果可能进入 Teams 会话、Copilot 历史记录或企业日志,其保留周期不能只看 Databricks 一侧。
    2. **敏感字段能否被汇总推断。**用户即使不能读取单条薪酬记录,也可能通过小样本分组反推出个人信息。
    3. **Agent 能否调用后续动作。**当 Genie 与工作流连接后,错误回答可能触发通知、工单甚至审批,风险高于单纯聊天。
    4. **成本能否被控制。**自然语言的连续追问可能产生多轮模型推理和数据查询,企业需要设置资源、并发和查询预算。
    5. **回答是否有审计证据。**关键经营结论应保留身份、数据版本、查询条件和时间戳,避免无法复盘。

    Databricks 官方文档也单独提示了 Teams 应用的限制项,这说明当前集成仍需要按具体租户、区域和功能可用性进行验证。企业不应把演示中的顺畅对话直接等同于可全员上线的生产能力。

    微软拿入口,Databricks拿数据层

    这次合作延长至 2030 年代,说明双方瞄准的不是一个插件,而是企业 AI 基础设施的长期绑定。Databricks 表示将加大对 Azure 的投入,并扩大使用 Azure Databricks 来运行自身核心业务运营和分析,这相当于它也在用自家与微软联合提供的云上产品验证规模化能力。

    微软的收益是让 Microsoft 365 Copilot 获得更深的企业数据访问能力。办公助手如果只能总结邮件和会议,很容易停留在内容整理层;接入 Genie 这类数据 Agent 后,它才有机会回答经营问题,并把分析结果带入会议、协作和自动化流程。

    Databricks 的收益是获得 Microsoft 365 的分发入口。企业数据平台通常由工程师和分析师使用,而 Teams 和 Microsoft 365 面向的是全体知识工作者;Genie 一旦进入这些入口,潜在用户规模会从数据团队扩展到销售、财务、运营和管理层。

    双方还计划增加对 Microsoft Azure Cobalt 的使用。**Azure Cobalt 是微软自研的 Arm 架构云端处理器系列。**Databricks 此次只表示会通过增加使用 Cobalt 提升性能和效率,尚未披露具体实例规格、迁移比例、成本降幅或查询性能数据,因此现阶段更适合把它理解为基础设施合作信号,而不是可以量化的产品性能升级。

    这次更新有用,但不会自动消灭 BI

    Genie 接入 Microsoft 365 是一个实用方向,因为企业员工更愿意在熟悉的办公入口提问,而不是学习另一个分析产品。不过,它替代的首先是临时取数、简单拆分和重复问答,而不是经过审计的财务报表、固定经营看板或复杂的数据科学工作。

    传统 BI 仍然适合持续监控和统一展示。管理者每天需要查看的核心指标,不应该每次都通过自然语言重新生成;自然语言助手更适合处理看板之外的追问,例如某个指标为什么变化、哪些客户贡献了差异、是否存在异常分组。

    Genie 的竞争力最终取决于三个指标:回答是否可信、权限是否完整、从提问到结果是否足够快。Databricks 与微软目前没有公布此次集成的独立价格、端到端延迟、查询准确率或企业部署规模,因此暂时无法用统一跑分判断它对 Power BI Copilot、Snowflake Cortex Analyst 等产品的领先幅度。

    可以确定的是,企业数据助手正在从独立聊天页面转向办公软件中的基础能力。模型本身会逐渐商品化,真正形成壁垒的将是身份链路、语义层、数据治理和工作流分发,而这恰好是微软与 Databricks 各自最擅长的部分。

    参考来源

    按指定的可访问域名范围,以下权威来源未附站外超链接,仅保留来源名称与内容说明。

    • **Databricks 与微软扩大合作公告:**说明双方将战略合作延长至 2030 年代,并推进 Genie、Microsoft 365、Azure Databricks 与 Azure Cobalt 的整合。
    • **Databricks Genie on Microsoft 365 Copilot 官方文档:**说明 Teams 应用和 Power Platform/Copilot Studio 两种部署路径,以及在 Microsoft 365 Copilot 中选择 Genie 的方式。
    • **Microsoft Learn:Databricks Genie on Microsoft 365 Copilot:**说明 Azure Databricks 与 Microsoft 365 Copilot 的连接、安装和使用流程。
    • **Databricks 官方博客《Use Genie Everywhere with Enterprise OAuth》:**说明企业 OAuth、Teams、Copilot Studio、SDK 与自定义应用中的身份和权限治理方式。
    • **36氪 7 月 23 日快讯:**转述 Databricks 与微软延长战略合作及扩大 Azure 投入的最新消息。
  • GPT-5.5看得见,却不会动

    GPT-5.5看得见,却不会动

    ActiveVision 最新测试显示,GPT-5.5 得分仅为 10.6%,远低于人类的 96.1%。模型能识图、写代码,却仍难以在变化环境中持续观察并主动操作。

    GPT-5.5 在主动视觉测试中只拿到 10.6%

    GPT-5.5 在新基准 ActiveVision 上只解决了 10.6% 的测试项目,并在 17 项任务中的 11 项得分为零。同期参与评测的 Claude Fable 5 得分更低,仅为 3.5%;三名人类参与者的平均成绩则达到 96.1%。

    这组结果来自本周公开的预印本论文,论文编号为 arXiv:2607.16165。研究者使用了 GPT-5.5 对外开放的最高推理强度档位,但它与人类之间依然相差 85.5 个百分点;按得分比例计算,人类成绩约为 GPT-5.5 的 9.1 倍。

    ActiveVision 成绩对比柱状图,GPT-5.5 为 10.6%、Claude Fable 5 为 3.5%、人类为 96.1%

    ActiveVision 是一套测试模型能否通过反复观察、判断和操作完成视觉任务的基准,而不是让模型对一张静态图片做一次性描述。它包含 17 项任务,分属 3 个类别,设计目标是迫使模型持续获取新的视觉信息,而不能只靠第一眼生成答案。

    | 参与者或模型 | ActiveVision 得分 | 零分任务 | 与人类差距 | |—|—:|—:|—:| | GPT-5.5(最高公开推理强度) | 10.6% | 11/17 | 85.5 个百分点 | | Claude Fable 5 | 3.5% | 论文摘要未单列 | 92.6 个百分点 | | 人类参与者(3 人平均) | 96.1% | 未披露 | — |

    GPT-5.5 虽然比 Claude Fable 5 高出 7.1 个百分点,得分约为后者的 3 倍,但这并不意味着它已经接近可用。10.6% 在真实产品里意味着绝大多数操作链都会中途失败,而 11 项任务直接归零,则说明模型面对的不是偶发识别错误,而是一整类能力缺失。

    ActiveVision 测的不是“看图答题”

    主动视觉是智能体根据当前观察主动选择下一步动作,并利用动作带来的新画面继续推理的能力。它与传统视觉问答最大的区别在于,输入不是固定的:模型点击、移动、缩放或改变视角之后,环境会发生变化,模型必须重新确认状态。

    传统多模态评测更像把一张卷子拍下来交给模型,而 ActiveVision 更像让模型坐到电脑前亲自完成任务。前者只需要把图像压缩成一次性的语义表示,后者则要求模型循环执行“观察—形成假设—采取动作—检查结果—修正计划”。

    这个差别看起来只是多了几轮交互,实际却把错误来源成倍放大。一条包含 10 个步骤的操作链,即使模型每一步成功率都有 90%,整条链全部正确的概率也只有约 34.9%;如果单步可靠性降至 80%,最终成功率会跌到约 10.7%,恰好接近 GPT-5.5 此次的整体成绩。

    ActiveVision 因此暴露的是系统级可靠性,而不只是单张图片的识别准确率。模型可能第一步看对了按钮,第二步却没有确认点击是否生效;也可能正确识别局部元素,却忘记当前任务进行到了哪里;还可能在操作失败后继续沿用旧状态推理,最终让整条行动链偏离目标。

    同一个 GPT-5.5,静态视觉能拿 76.12%

    GPT-5.5 的低分不能简单归结为视觉编码器太弱,因为它在静态视觉测试中的表现并不差。Roboflow 公布的第三方 Vision Evals 显示,GPT-5.5 综合准确率为 76.12%,在 63 个参评模型中排名第四。

    | 测试项目 | GPT-5.5 成绩 | 主要考察能力 | |—|—:|—| | Roboflow Vision Evals 综合成绩 | 76.12% | 静态图像理解与视觉问答 | | 文档理解 | 88.9% | OCR、版面结构和文字关系 | | 缺陷检测 | 86.7% | 发现图像中的异常区域 | | 对象理解 | 85.7% | 识别物体及其语义属性 | | 精确计数 | 30.0% | 对重复目标进行准确计数 | | ActiveVision | 10.6% | 反复观察、操作与状态更新 |

    这两组成绩并不矛盾,反而清楚展示了前沿模型能力的“锯齿状边界”。GPT-5.5 可以读懂复杂文档、判断物体属性,也能在缺陷检测任务中取得 86.7%,但一旦视觉信息需要随着动作持续更新,它的能力就从 70%—80% 档位跌到 10.6%。

    第三方分析认为,GPT-5.5 采用了基于 32×32 patch 的视觉编码方式,这有利于处理高分辨率文档、图表和结构化布局。Patch 可以理解为模型观察图片时使用的小方格:图片先被切成网格,再转换为视觉 token 进入模型。它能帮助模型“读懂画面”,却不会自动赋予模型稳定的行动闭环。

    精确计数只有 30% 也是同一种问题的较轻版本。模型可以知道画面里有很多相似物体,却容易重复计算、遗漏目标或失去空间对应关系;在主动操作里,这种空间追踪误差还会与历史状态、动作反馈和任务目标叠加,最终形成连续失败。

    会写代码,也没有补上视觉闭环

    ActiveVision 最值得关注的发现不是前沿模型又输掉了一次新跑分,而是模型无法靠自己写代码修补能力缺口。论文专门观察了模型能否生成辅助程序来完成任务,但代码能力没有顺利转化为主动视觉能力。

    这对 GPT-5.5 尤其刺眼,因为编码和智能体执行正是它这一代的主打方向。公开数据中,GPT-5.5 在 Terminal-Bench 2.0 上达到 82.7%,比 GPT-5.4 提高 7.6 个百分点;BrowseComp 成绩为 84.4%,提高 1.7 个百分点。GPT-5.5 Pro 在 BrowseComp 上还可以达到 90.1%。

    | 基准 | GPT-5.5 成绩 | 任务性质 | 能否直接代表主动视觉 | |—|—:|—|—| | Terminal-Bench 2.0 | 82.7% | 终端环境中的编码与执行 | 不能 | | BrowseComp | 84.4% | 浏览、检索与信息整合 | 不能 | | GPT-5.5 Pro BrowseComp | 90.1% | 更高强度的浏览推理 | 不能 | | ActiveVision | 10.6% | 视觉反馈驱动的连续操作 | 可以直接衡量 |

    代码不能救场的原因并不神秘:程序可以放大、裁切、标记和比较图像,却不能替模型决定什么时候应该重新观察,也不能保证模型正确理解程序输出。只要模型对环境状态的表征已经错了,它就可能写出逻辑正确但输入错误的工具,然后更自信地沿着错误路径前进。

    主动视觉真正缺少的是“感知策略”,而不是另一个图像处理函数。一个可靠智能体需要知道当前证据是否充分、某次点击有没有成功、界面是否发生了预期变化,以及什么时候应该放弃原计划重新定位目标。这些判断无法靠一次代码生成完成。

    高推理强度为什么仍然不够

    增加推理 token 主要改善的是模型在已有信息上的搜索深度,却无法保证它主动获得了正确的新信息。模型如果从第一帧就误认目标位置,后续再长的思维链也可能只是在错误地图上做更复杂的规划。

    视觉行动任务至少同时依赖四层能力:

    1. 视觉定位能力:准确找到目标元素,而不只是说出画面中“存在一个按钮”。
    2. 状态记忆能力:记住已经执行的动作、当前进度与环境变化。
    3. 反馈校验能力:每次操作后确认结果,而不是默认动作已经成功。
    4. 恢复规划能力:发现界面不符合预期时回退、重试或更换策略。

    任何一层出现短板,都会让高推理强度失去意义。当前模型常见的工作方式是先根据首帧形成一个完整计划,再连续执行多个动作;人类则更倾向于每做一步就扫一眼界面,用低成本反馈修正下一步。后者看起来没有长篇推理,实际却拥有更密集的闭环校验。

    人类 96.1% 的成绩说明这些任务并非依靠冷门知识或超人视觉才能完成。尽管只有 3 名人类参与者,样本规模不足以代表完整人群分布,但接近满分的平均结果仍足以表明:ActiveVision 的主要难点来自模型架构和交互策略,而不是任务本身含糊不清。

    10.6% 对视觉智能体意味着什么

    ActiveVision 的结果直接给“截图驱动型智能体”泼了一盆冷水。只要产品需要模型根据连续截图控制桌面软件、网页、工业界面或远程设备,静态视觉问答跑分就不能作为可靠性的替代指标。

    浏览器智能体可能因为 DOM 和无障碍树而显得比纯视觉智能体成熟。结构化页面会直接告诉模型某个元素是按钮、输入框还是链接,相当于给它一份机器可读的地图;ActiveVision 这类任务则更接近只给截图,让模型自己完成定位和状态跟踪,难度自然更高。

    机器人场景面临的风险还会进一步放大。网页点错按钮通常可以撤销,但机械臂抓错位置、移动设备误判障碍物或工业系统重复执行指令,都可能产生物理成本。10.6% 的成功率意味着这类模型目前更适合作为建议者和异常提示器,而不是脱离监督的最终执行者。

    现阶段更现实的产品路线是限制动作空间,并给视觉模型加上外部校验。开发者可以让模型每次只选择少量预定义动作,要求关键操作前后保存截图,对高风险步骤使用传统视觉算法或规则系统复核,并在状态变化不明确时强制停止,而不是让模型凭自然语言计划一路执行到底。

    GPT-5.5 仍然强,但强得并不均匀

    GPT-5.5 不是一款视觉能力差的模型,而是一款在视觉语义理解和视觉行动之间存在巨大断层的模型。它在文档、对象和缺陷理解上表现靠前,在终端编码与网页研究中也有领先成绩,但这些能力尚未组合成稳定的主动操作系统。

    这种断层也解释了为什么演示视频常常比真实部署更惊艳。演示可以挑选成功路径、固定窗口尺寸并避免意外弹窗,生产环境却会出现加载延迟、遮挡、动画、焦点丢失和状态不同步;模型只要漏掉一次反馈,后续步骤就可能全部失效。

    价格同样会放大这一问题。GPT-5.5 的公开价格为每百万输入 token 5 美元、每百万输出 token 30 美元,上下文窗口为 100 万 token;GPT-5.5 Pro 则分别达到 30 美元和 180 美元。主动视觉需要重复上传画面并进行多轮推理,如果成功率仍只有 10.6%,更高推理预算很容易变成昂贵的重复试错。

    | 模型 | 输入价格 | 输出价格 | 上下文窗口 | ActiveVision 已披露成绩 | |—|—:|—:|—:|—:| | GPT-5.5 | 5 美元/百万 token | 30 美元/百万 token | 100 万 token | 10.6% | | GPT-5.5 Pro | 30 美元/百万 token | 180 美元/百万 token | 公开信息未在论文摘要中对应说明 | 未单列 |

    ActiveVision 的价值正在于把“会看”和“会做”拆开评估。模型读懂一张截图,并不等于它能在十张连续截图中保持同一目标;模型会生成自动化脚本,也不等于它能判断脚本何时失效。对开发者而言,这比又一个综合多模态分数更接近真实产品问题。

    真正的突破要看闭环成功率

    下一代视觉智能体的关键指标不应只是单帧准确率,而应包括长链任务成功率、动作后复核率、错误恢复率和平均无故障步数。只有这些指标同步提高,模型才可能从“能解释界面”走向“能可靠操作界面”。

    GPT-5.5 的 10.6% 也不意味着主动视觉没有进展空间。模型厂商可以引入更细粒度的视觉记忆、显式状态表示、动作前后差分检测,以及针对失败恢复的强化学习;基准设计者则需要继续区分识别错误、动作错误、记忆错误和恢复失败,避免把所有问题压成一个总分。

    目前最稳妥的结论是:GPT-5.5 已经是强大的静态视觉理解模型和编码模型,但还不是可靠的视觉操作模型。它看得懂很多东西,也能写出复杂程序;真正困难的是让它在每一次动作之后重新看清现实,并承认现实可能没有按计划发展。