用 NVIDIA FLARE 构建联邦多模态 AI 工作流
NVIDIA FLARE 可用于构建联邦多模态 AI 工作流,让视觉问答、图像描述与图文推理等视觉语言模型(VLM)任务在数据无法集中、原始记录分散于各机构的前提下完成协同训练。原文正文指出,现代 VLM 已能支持这些任务,而联邦学习提供了跨数据本地站点协调训练的途径。
NVIDIA FLARE 可用于构建联邦多模态 AI 工作流,让视觉问答、图像描述与图文推理等视觉语言模型(VLM)任务在数据无法集中、原始记录分散于各机构的前提下完成协同训练。原文正文指出,现代 VLM 已能支持这些任务,而联邦学习提供了跨数据本地站点协调训练的途径。
NVIDIA ALCHEMI Toolkit 于今年早些时候推出,可显著降低原子尺度模拟的使用门槛,让 AI 编程智能体接入材料模拟栈。原子模拟依赖三要素:科学知识、计算高效的模拟实现,以及可访问的模拟接口,其中科学知识仍属研究者领域。
NVIDIA 介绍用多 GPU 加速 UMAP 的方法,可在数分钟内完成大规模降维且不损失精度。UMAP 广泛用于可视化与特征提取,覆盖探索性数据分析、主题建模和单细胞分析等场景,这类工作流常需反复调参重跑,数据集增大后对速度要求更高。
MIT CSAIL 团队在 Nature Communications 发表研究,提出“归因衰减”现象:生成模型训练数据越多,单张训练图像、某位艺术家的全部作品或某个人的所有照片对特定输出的影响越小,甚至删除后输出完全不变。
推荐理由:研究提出归因衰减现象并给出精确删除训练样本的方法,为版权与责任认定提供了可对照的技术证据。
Hugging Face 博客介绍其自研约束感知 GPU 分配器,在相同硬件、相同负载下与 FIFO 调度器对比测试,GPU 利用率最高提升 33 个百分点,优先级加权产出提升 24.6%–105.1%,平均 52%。在 8 GPU 训练密集型场景中,利用率从 53.6% 升至 87.0%,产出提升 105%。该分配器将实时推理需求视为随时步变化的曲线,批式任务按优先级在整个调度周期内排布。
NVIDIA 发布 Nemotron 3.5 Lightning NVFP4 检查点,借助 NVIDIA Model Optimizer 的 QAD 方法在保持精度的同时实现最高 4 倍吞吐提升。该检查点体积从全精度版本的 66 GB 压缩至 22 GB。
IEEE Spectrum 报道称,智能体 AI 的兴起正让 CPU 重新成为 AI 基础设施的关键环节。AWS 此前要求工程师尽一切代价节省 CPU 周期,因为 AI 工作负载令其云上 CPU 服务器等待时间激增。
Sebastian Raschka 发布教程,演示如何从零构建 AI 文本检测器:微调 DistilBERT 分类器输出 0-100 的 AI 生成概率分,并提供本地浏览器 UI 与 API,可对整篇文本打分并高亮各文本块的分数。项目还用该检测器作为 verifier,训练小语言模型生成能规避检测的文本,以研究 AI 检测器的局限。
Hugging Face 发布 2026 夏季开源模型观察报告,基于 Hub 1 至 8 月的模型、数据集与下载数据,指出前沿模型规模由中国实验室领跑,而下载量仍集中在小型稳定模型上。
推荐理由:Hugging Face 用平台自身数据拆开浏览量、采纳量与衍生生态三层指标,读者可据此判断开源模型格局的实际分布。
Hugging Face 举办 ICML 2026 开放复现挑战赛,1,221 名社区成员用 Claude Code、Codex、Cursor 等编码智能体在 19 天内发布 6,816 份 Trackio logbook,覆盖 2,226 篇论文、约占大会 34%。
阿里开放了 Qwen3.8-2.4T-A95B(Qwen3.8-Max)的模型权重,这是其目前最大的开放权重模型。该模型总参数 2.4T、单 token 激活 95B,采用细粒度 MoE 架构,混合全注意力与线性注意力,上下文窗口最高 100 万 token。NVIDIA 开发者博客介绍在 GB300 NVL72 上部署该模型并支持可配置推理。
推荐理由:摘要给出 Qwen3.8-2.4T-A95B 的开放权重与关键规格,读者可借此了解其 MoE 结构与长上下文配置。
Hugging Face 的 OlmoEarth Studio 现支持计算并导出由开源 OlmoEarth 基础模型生成的地球观测嵌入向量,输出为 Cloud-Optimized GeoTIFF(COG),向量以 int8 存储、每维一个波段。
IEEE Spectrum 与 Wiley 发布、Voxel51 赞助的白皮书基于 2026 年对 700 多名从业者的调研,指出多数模型失败源于数据问题,策展数据比追求更大架构更重要。78% 的团队已从视觉与物理 AI 获得可衡量的价值,但 74% 认为该领域投入相对机会仍显不足。成功交付的团队在数据工作上投入的时间接近挣扎团队的 3 倍,92% 的从业者看好该领域下一阶段走向。
Nathan Lambert 完成了一本关于 RLHF(Reinforcement Learning from Human Feedback)的后训练教科书,并用 LLM 辅助排版、文字编辑和绘图。他认为当前模型在长篇非虚构写作上已停滞:GPT 5.5 Pro 能在 200-300 页书稿中找出细微笔误,Claude 更适合当编辑,但模型仍难以把内容组织成连贯章节,错误会复合累积。
微软研究院推出胸部 X 光 VLM 研究模型 CARE-X,用辅助监督头与 DAPO 强化学习在生成式与判别式任务间统一推理,并明确其尚未获监管批准、不可用于临床诊断。
IBM 研究团队提出 ALTK-Evolve,与 ACE 一样让智能体从自身轨迹中学习经验并在推理时注入,不做权重更新也不需要人工标注,区别在于经验的交付方式。
MIT CSAIL 与清华大学提出预训练方法 GeoPT,通过 130 万个"合成动力学"样本让仿真模型学习物理交互,峰值性能达成速度提升 2 倍、训练数据减少最多 60%。该方法可模拟车辆、飞机、船舶受风、水、碰撞等力的响应,在工业基准上速度和精度超过现有仿真模型。
Nathan Lambert 的后训练教材《Reinforcement Learning from Human Feedback: Aligning and Post-training LLMs》由 Manning 出版,已在美国发货,10 月登陆英国亚马逊。
Import AI 第 468 期收录智库 IFP 提出的 23 条应对 AI 研发自动化风险的政策建议,分属透明度、风险管理和算力分配等 7 个类别。MIT 与 Columbia 的论文 Racing to Ruin 用博弈模型分析前沿 AI 企业的研发竞赛,认为透明度和对手可信度是达成协调减速的关键变量,低信任下所有均衡都会奔向灾难。
Multiverse Computing 发布论文《Efficient Knowledge Distillation for LLMs: Offline Top-K Logits and a Fused Chunked KL Loss》。
Google DeepMind 在 Nature 发表论文,称 WeatherNext AI 模型在气旋路径、强度和风场结构预测上达到 SOTA,平均比分先模型多出超过一整天的预警提前量,三天预报精度相当于过去两天。
推荐理由:原文给出气旋路径与强度预报的量化领先幅度,以及模型权重开源的具体范围,读者可据此判断气象预报的 AI 替代空间。
Meta 为广告排序提出多阶段序列模型架构,将重的离线用户建模与轻量的在线排序解耦,并引入稠密 tokenization 与 target-aware 注意力直接学习特征交互。
MIT 团队在《Joule》发表论文,用 AI 引导算法在 24 小时内设计出 10 万个候选分子,从中筛选出比 DMTMSA 更小的溶剂 DMFSA,同时兼顾钠金属电池的快充性能与长期稳定性。钠的储量约为锂的 1000 倍,单位成本仅为锂的约百分之一,但钠金属高反应性此前难以兼顾快充与循环寿命,DMFSA 在 27 个候选溶剂的对比测试中表现最佳。
NVIDIA 提出 World Action Models,用于解决机器人策略泛化难题:传统策略在训练场景有效,物体形状、位置或光照变化后往往失效。该模型通过让策略理解任务背后的物理规律而非模仿演示,从而泛化到新条件,这一能力来自其骨干网络。
NVIDIA 推出 Alpamayo 2 Super,一个开放 340 亿参数的推理视觉模型,可在自动驾驶开发中统一生成轨迹、高层意图预测、场景理解与数据标注,替代此前各环节分立的模型。该模型支持在同一套表示上对比相关输出、排查模型行为,并复用至整个开发流程。
NVIDIA 公布 Vera Storage 基准测试结果,针对智能体 AI 工作流中的加密、压缩、完整性校验与恢复性能进行评测。该存储需持续支撑企业知识检索、持久内存访问和 KV cache 复用等操作,每个智能体步骤可能触发多次存储操作并在流程中重复。
Interconnects 发布 Artifacts Hub 和 Adoption Dashboard 两个免费数据工具,前者覆盖过去两年发布的 792 个模型,展示 Hugging Face 趋势、Open Router 推理 token、Artificial Analysis 智能指数与 RAM 采用指标;后者按地域和组织追踪下载量与衍生模型数,突出中美差距。
Interconnects 在开放模型月度盘点中指出,此前被普遍预测的模型实验室整合并未到来,反而有更多公司训练并开放强模型,Thinking Machines 的开放模型微调服务年收入已达数亿美元。
NVIDIA nvmath-python 是一个衔接 Python 科学计算生态与 NVIDIA CUDA-X 数学库的库,让 Python 用户在不改变现有工作流的前提下获得 CUDA-X 性能。视不同 API,运算可运行在 CPU、支持 CUDA 的 GPU,或分布式多 GPU、多节点系统上。
NVIDIA 指出,采用相同 H100、GB200 NVL72 或 GB300 NVL72 的两套 AI 集群,在同一工作负载、模型和全局 batch size 下,训练吞吐量常出现 8% 到 12% 的差距,原因多来自内核层面的配置选择。NVIDIA 通过 Exemplar Cloud 总结在 AI 基础设施上释放完整性能的经验。
MIT 与波士顿 Beth Israel 医院的研究者 1975 年起收集并数字化心电图记录,1980 年完成逾 10 万条标注,最初预计只有十几个机构使用,十年间邮寄出约 100 份拷贝。
NVIDIA 提出以 GPU 原生医学物理仿真开发医疗机器人,应对医疗机器人无法像自动驾驶或工业机器人那样依赖互联网规模数据采集和无限真实世界实验的问题。该领域每次演示都需要专用设备、临床专业知识和患者或实验室环境,由此带来数据缺口等三大挑战,仿真成为训练现代机器人策略的途径。
随着 AI 负载增长,算力需求激增正推动半导体行业追求前所未有的性能目标,即便是小幅延期也会在快速迭代的 AI 硬件周期中造成巨大财务影响。同时,行业正从芯片级优化转向系统级工程,散热与功耗挑战随之叠加。NVIDIA 认为应对这些需求需要在材料工程与制造环节取得突破。
伯克利 AI 研究提出 ABBEL 框架,将 LLM 的摘要以自然语言"信念状态"形式隔离并监督其信息内容,通过类自编码器的信念评分奖励能重建最新观测的摘要。在协作编程基准 CollabBench 上,ABBEL-rec-BG 把与全上下文模型的性能差距缩小约 50%,训练步数从 100 降至 50,峰值上下文 token 数也低于全上下文设置。
NVIDIA 推出 ModelExpress,用于在集群内高速分发模型文件。随着模型 checkpoint 增长到数百 GB 乃至 1 TB,冷启动拉取权重、自动扩缩容与滚动更新填充新副本、RL 后训练持续搬运权重等场景让传输开销迅速累积。
NVIDIA 发布指南,介绍如何通过 Prime Intellect Lab 在几分钟内定制 NVIDIA Nemotron 3 Nano,把通用模型适配到具体用例、领域和语言。定制需要 GPU 等基础设施、技术专长与针对工作流的软件,以及对特定领域专业知识的依赖。
MIT 电子工程与计算机科学系荣休教授、LIDS 首席研究员 Dimitri Bertsekas 于 6 月 3 日在马萨诸塞州 Belmont 家中去世,享年 83 岁。他的研究横跨优化、控制、大规模计算、强化学习与人工智能,并撰写或合著逾 20 本高影响力著作,其中与 John Tsitsiklis 合著的神经动态规划一书预先勾勒出后来强化学习的诸多核心思想。
NVIDIA GB300 NVL72 在预训练 DeepSeek-V3 671B 时创下每 GPU 1,648 TFLOPs 的世界纪录。随着前沿模型预训练转向 MoE 架构,每 token 计算量下降,通信效率日益决定模型在数千块 GPU 上的扩展表现。
NVIDIA 发文介绍 NVLink 作为 AI 工厂的 Scale-Up 网络。随着 AI 负载规模扩大、模型日趋复杂,AI 工厂这类数据中心级系统正被加速部署,以持续将数据和能源转化为智能。NVLink 正是为满足这一算力基础设施需求而设计的网络方案。
Google DeepMind 与 Isomorphic Labs 公布联合生物韧性方案,从预防、检测、响应三方面推进:对 Gemini 等模型执行威胁建模、评估、缓解与监控四步安全流程,并尝试将 SynthID 水印技术用于生物学以筛查 AI 生成的 DNA 序列。