跳到正文

技术方向

多模态 最新动态

文字之外的能力:看懂图片、图文混合理解、音视频输入输出的模型与产品进展。

139 条精选近 30 天 19 条共收录 559 条

更新

精选归档 · 第 2 页

10月14日周三第 21–40 条
  1. Google DeepMind88

    Google DeepMind 发布 Gemini 4 Argon 并全球开放

    Google DeepMind 宣布 Gemini 4 Argon 即日起全球开放,开发者和企业可通过 AI Studio 与 Gemini 平台的 API 使用,Google AI Ultra 订阅者可在 Google Antigravity 使用,Ultra 和 Pro 订阅者可在 Gemini app 和 Search 的 AI Mode 使用。

    推荐理由:原文列出定价、上下文规格和多领域实测数据,读者可据此评估它对现有工作流的适配度。

10月9日周五
10月8日周四
  1. TechCrunch · AI76

    OpenAI 随 GPT-6 推出 Intelligent UI 新界面,为 ChatGPT 加入可交互视觉元素

    OpenAI 随新的 GPT-6 模型推出名为 Intelligent UI 的新界面,周三起为 ChatGPT 对话加入大量可交互视觉元素,包括可点击按钮、定制计算器、交互图表和可编辑图表等。

    推荐理由:原文交代了新界面的交互形态、示例场景和分层推送节奏,可据此判断它对现有对话体验的实际改变。

  2. Hugging Face Blog62

    Liquid AI 开源 d1-3B 与 d1-omni-600M 决策模型

    Liquid AI 发布 d1 决策模型家族的两款开放权重模型 d1-3B 和 d1-omni-600M(实验版),在 Decision Index 0.2.1 上 d1-3B 得分 48.57,超过所有 4B、9B 模型以及 Decider 35B-A3B(47.11)。

    推荐理由:给出了不同设备上的实测延迟和基准分数,读者可据此判断它是否满足自己的端侧部署预算。

10月7日周三
  1. Google DeepMind72

    Google DeepMind 发布 EmbeddingGemma 2 多模态嵌入模型

    Google DeepMind 发布 EmbeddingGemma 2,一个基于 Gemma 4 架构、采用 Apache 2.0 许可的 740M 参数多模态嵌入模型,将文本、代码、图像、视频和音频统一映射到共享嵌入空间。

    推荐理由:给出了参数量、内存占用与上下文长度等具体指标,读者可据此判断它是否适合端侧部署。

10月6日周二
  1. Google Research67

    Google Earth AI 公开 PDFM 地理空间基础模型在全球公共卫生中的验证结果

    Google Research 介绍其 Earth AI 的 Population Dynamics Foundation Model(PDFM)如何把隐私保护的搜索趋势、人类流动、建成环境密度和环境因素压缩为按月刷新的位置嵌入,无需任务特定微调即可作为即插即用输入接入现有流行病学与机器学习工作流。

    推荐理由:原文用五个独立合作方的验证矩阵说明地理嵌入如何在不同疾病与地区中补充现有流行病学模型,读者可据此评估其跨场景迁移价值。

10月1日周四
9月30日周三
  1. Google DeepMind74

    Google DeepMind 推出 SynthID Bio 为 AI 生成蛋白质加水印

    Google DeepMind 推出 SynthID Bio,把水印技术引入合成生物学,将不可察觉的签名直接嵌入蛋白质的氨基酸序列与 3D 结构坐标中,且在实验室测试中保持蛋白质生物功能不变。

    推荐理由:原文说明了水印如何嵌入生物代码并经湿实验验证功能不受损,读者可据此理解其对 DNA 合成筛查的实际作用。

9月29日周二
  1. TechCrunch · AI79

    AMD 将以 82 亿美元收购 Fei-Fei Li 创立的 World Labs

    AMD 宣布以 82 亿美元收购 World Labs,交易预计年底前完成,需监管批准。World Labs 创始人 Fei-Fei Li 将加入 AMD 担任执行副总裁兼首席科学家,她表示希望把技术突破扩展到实验室之外、更贴近硬件。

    推荐理由:收购将世界模型竞争与芯片生态绑定,读者可据此理解 AMD 对标 Nvidia 的布局路径。

  2. Microsoft Research62

    微软研究院发布 Quine:面向生物学复杂性的 AI 研究系统

    微软研究院发布 Quine,一个面向生物学复杂性的 AI 研究系统,由生物世界模型和连接模型、科学工具、文献与实验的交互式 harness 组成。该系统与 Broad Institute 合作用于胰腺导管腺癌研究,预测并优先排序数千种化合物,从缩小搜索空间到选出候选化合物仅用一个周末,湿实验验证中排名最高的化合物产生了最大的预期细胞状态转变。

    推荐理由:微软研究院公开 Quine 的多模态生物世界模型与实验闭环,读者可了解 AI 参与药物发现的具体流程与验证结果。

  3. Latent Space80

    AMD 以 82 亿美元收购 World Labs

    AMD 以 82 亿美元收购 World Labs,后者自 2024 年成立以来专注空间智能,覆盖创意、设计到机器人仿真。World Labs 近期发布的 Atlas 模型通过结合生成模型与多视图几何,解决了计算机视觉中长期存在的稀疏重建问题,可从 2D 图像预测新视角,性能超过专用模型。该能力被用于机器人 RL 环境、治疗与娱乐场景生成,以及房地产、设计和建筑的真实世界重建。

    推荐理由:AMD 以 82 亿美元收购 World Labs,读者可借此了解空间智能与机器人仿真赛道的整合动向。

  4. The Verge · AI76

    AMD 以约 82 亿美元全股票交易收购 World Labs

    AMD 宣布以约 82 亿美元全股票交易收购李飞飞联合创办的 AI 研究实验室 World Labs,交易预计年底前完成。World Labs 于 2024 年成立,数月内估值达 10 亿美元,2025 年推出首个商业产品世界生成模型 Marble,可根据提示词生成可交互 3D 世界。

    推荐理由:这笔全股票交易给出了金额、估值变化与人事安排,可观察芯片厂商向模型研究延伸的路径。

9月25日周五
9月2日周三
  1. Google DeepMind73

    Gemini 推出 agentic video understanding 视频理解功能

    Google DeepMind 在 Gemini 3.7 Flash、3.6 Flash 和 3.5 Flash-Lite 上推出 agentic video understanding,通过让模型主动调用原生视频工具按需检索画面、音频与字幕,替代固定帧率的静态处理。

    推荐理由:原文给出了成本、token 与准确率三项量化变化及启用方式,读者可据此评估它对长视频分析工作流的实际影响。

8月28日周五
  1. Google Research61

    Google Earth AI 推出 planetary prediction engine 自动化地理空间建模

    Google Research 介绍 Google Earth AI 的实验性能力 planetary prediction engine(PPE),可从自然语言查询出发自主完成数据发现、特征工程、模型训练与评估,把复杂地理空间预测模型的构建时间从数周缩短到数分钟。

    推荐理由:原文给出了三阶段架构与四类任务的具体指标,读者可据此判断自动化地理空间建模相对人工流程的实际增益。

  2. Google DeepMind62

    Google DeepMind 发布 Gemini Omni 1.1 Flash,新增场景延展与首尾帧插值等视频控制能力

    Google DeepMind 宣布推出 Gemini Omni 1.1 Flash,通过 Gemini API 在 Google AI Studio 面向开发者开放,使 Omni 1.1 达到可用于专业生产的状态。

    推荐理由:原文列出了场景延展、首尾帧插值、360p 快速原型和 4K 升档等具体能力与参数,可据此评估其对生成视频工作流的改动。