跳到正文

#多模态

今日 1 条
7月1日周三
6月25日周四
  1. Google DeepMind71

    Gemini 3.5 Flash 内置 computer use 能力

    Google DeepMind 宣布 computer use 成为 Gemini 3.5 Flash 的内置工具,此前该能力仅以独立的 Gemini 2.5 computer use 模型提供。

    推荐理由:官方说明 computer use 从独立模型并入 Gemini 3.5 Flash 主模型的定位变化,并给出配套安全机制与使用入口,读者可据此评估迁移时机。

6月23日周二
6月17日周三
6月13日周六
6月9日周二
  1. Google DeepMind75

    Google DeepMind 发布 Gemma 4 12B:无编码器统一多模态模型

    Google DeepMind 发布 Gemma 4 12B,可在 16GB 内存或显存的笔记本本地运行,性能接近其 26B MoE 模型但内存占用不足一半。该模型采用无编码器统一架构,视觉与音频输入直接进入 LLM 主干,是首个支持原生音频输入的中等规模 Gemma 模型,以 Apache 2.0 许可发布,并同步推出官方 Skills 仓库。

    推荐理由:原文来自官方发布,给出架构细节、内存门槛和下载入口,可帮助读者评估在本地设备运行多模态模型的可行性。

5月27日周三
  1. Mistral AI48

    Mistral 收购 Emmi AI,推出面向工程加速的 physics AI 基础能力

    Mistral 将 Emmi AI 收入麾下,为企业级 AI 原生工业工程构建 physics AI 基础能力。这类数据驱动模型可从几何与边界条件直接预测物理行为,单 GPU 上一次前向传播数秒内输出完整物理场,替代传统 CFD/FEM 求解需数小时至数周的流程。已合作 ASML、Airbus、Safran、Siemens Energy 等伙伴,应用于产品设计、工装工艺设计和实时数字孪生。

5月23日周六
5月18日周一
  1. Google DeepMind81

    Google DeepMind 发布 Gemini Omni Flash 多模态视频生成模型

    Google DeepMind 发布 Gemini Omni 系列首个模型 Gemini Omni Flash,可结合图像、音频、视频和文本输入生成高质量视频,并支持通过自然语言多轮编辑。

    推荐理由:官方公告说明了 Gemini Omni Flash 的视频生成与对话式编辑能力、可用入口和订阅范围,读者可据此判断它如何改变创作流程。

5月17日周日
5月2日周六
4月30日周四
4月27日周一
4月16日周四
4月13日周一
4月9日周四
4月3日周五
3月29日周日
  1. Google DeepMind60

    Google DeepMind 推出 Gemini 驱动的 AI 智能指针并落地 Chrome 与 Googlebook

    Google DeepMind 发布由 Gemini 驱动的实验性 AI 智能指针,提出维持流程、所见即所指、用 This/That 简化指令、把像素变成可交互实体四项交互原则,让 AI 理解用户指向的内容与意图。

    推荐理由:原文给出交互原则和已在 Chrome 与 Googlebook 落地的入口,读者可据此评估指向式 AI 交互对现有提示词工作流的影响。

3月25日周三
3月17日周二
  1. Mistral AI67

    Mistral 发布 Mistral Small 4,统一推理、多模态与编码能力并以 Apache 2.0 开源

    Mistral 发布 Mistral Small 4,是首个将 Magistral 推理、Pixtral 多模态和 Devstral 智能体编码能力统一到单一模型的小型旗舰,采用 Apache 2.0 许可开源。

    推荐理由:原文给出架构参数、reasoning_effort 用法和与 GPT-OSS 120B 的输出效率对比,读者可据此评估部署成本与选型。

3月12日周四
  1. Google Research62

    Google 在 Flood Hub 推出 AI 驱动的城市山洪预报,可提前 24 小时预测

    Google 宣布在 Flood Hub 上线 Urban Flash Flood 预报,用 AI 方法提前最多 24 小时预测城市山洪风险。其 Groundsource 方法用 Gemini 分析公开新闻报道构建历史山洪数据集,训练基于 LSTM 的 RNN 模型,仅依赖全球气象产品即可运行,空间分辨率 20x20 公里,覆盖人口密度大于每平方公里 100 人的城市区域。

    推荐理由:原文给出模型方法、精度数据和与 NWS 的对比,读者可了解 AI 山洪预报在缺监测地区的实际表现。

12月3日周三
8月1日周五
7月17日周四
3月7日周五
  1. Mistral AI62

    Mistral 发布 OCR API,主打复杂文档理解

    Mistral AI 发布光学字符识别 API Mistral OCR,接受图像和 PDF 输入,以有序的图文交错形式提取内容,定位为搭配 RAG 系统处理多模态文档的模型。

    推荐理由:官方给出完整基准对比、定价和部署选项,读者可以据此评估它在文档理解和 RAG 流程中的实际适用性。