跳到正文

#多模态

今日 0 条
9月25日周五
8月26日周三
8月17日周一
8月13日周四
  1. Microsoft Research42

    MindTopo:微软研究院推出评估多模态模型拓扑推理能力的新基准

    微软研究院推出 MindTopo 基准,用于评估多模态大语言模型在连通性、封闭、顺序、分离和绳结五类拓扑关系上的推理与规划能力。测试显示,当前模型在静态图像识别上表现明显优于交互式规划任务,失败多发生在规划阶段而非感知阶段,图像与视频生成工具也难以在动作序列中稳定保持拓扑关系。

8月12日周三
7月23日周四
  1. Google Research62

    Google Research 发布 SymptomAI 论文:万人规模研究评估对话式症状评估智能体

    Google Research 发布论文 SymptomAI,介绍一项 n=13,917 的随机全美研究,参与者向五种不同问诊策略的 Gemini Flash 2.0 SymptomAI 智能体描述症状并获得鉴别诊断(DDx)。

    推荐理由:研究给出了万人规模真实问诊对照与可穿戴数据交叉验证方法,可参考其评估设计思路。

7月9日周四
  1. Google Research62

    Google Research 发布 SensorFM 可穿戴健康数据基础模型

    Google Research 发布大型传感器基础模型 SensorFM,用 500 万名同意参与者、超过 1 万亿分钟的多模态传感器信号做自监督预训练,学习可迁移到心血管、代谢、睡眠和心理健康的通用生理表征。

    推荐理由:原文给出了预训练规模与下游任务收益的对应关系,读者可据此判断通用表征在可穿戴健康场景的迁移空间。

7月8日周三
6月30日周二
6月13日周六
  1. Google Research54

    Google Research 发布AI辅助皮肤状况理解研究

    Google Research 分享了关于消费者如何用AI理解皮肤问题的两项研究。其中发表于 JAMA Dermatology 的大规模调查纳入 2,345 名参与者,使用AI工具时参与者尝试命名病症的比例超过 62%(对照组为 41%),命名准确率达 23%,约为对照组 8% 的三倍;但下一步就医决策的准确率在标准AI组未见统计显著提升。

6月5日周五
  1. Google Research70

    Google Research 发表 Nature 论文:用智能手机前置摄像头被动监测心率

    Google Research 在 Nature 发表论文介绍 PHRM 系统,可在日常使用手机时通过前置摄像头在人脸解锁后拍摄视频,被动估计心率与静息心率,心率 MAPE < 10%,日均静息心率相对可穿戴设备 MAE < 5 bpm。

    推荐理由:原文给出了跨肤色非劣性标准与真实场景验证方法,可迁移用于评估rPPG类健康监测模型的公平性。

5月27日周三
  1. Mistral AI45

    Mistral AI 的 Physics AI 研究成果盘点

    Mistral AI 通过收购 Emmi AI 加码 Physics AI,面向航空航天、汽车、半导体和能源等行业构建基础模型。其已发表成果包括 AB-UPT(可在单 GPU 上处理 9M surface 和 140M volume cells 的气动 CFD 模型)、UPT、NeuralDEM、GyroSwin 5D 等,覆盖 CFD、等离子体湍流与工业多物理过程的神经代理模型。

4月16日周四
3月18日周三