智能日报
业界资讯 智能手机 电脑硬件 平板电脑 智能手表 智能家电 耳机音频 笔记本 热点资讯

英伟达开源Nemotron 3 Embed系列模型,8B版RTEB夺冠助力AI智能体与RAG场景

2026-07-18来源:快讯编辑:瑞雪

英伟达近日宣布正式开源其最新研发的Nemotron 3 Embed系列模型,为AI智能体和检索增强生成(RAG)领域带来全新解决方案。该系列模型以开放权重形式发布,允许商业用途,并通过Hugging Face平台与NVIDIA NIM微服务向全球开发者免费开放。

针对不同应用场景,英伟达同步推出三个优化版本:旗舰版Nemotron-3-Embed-8B-BF16拥有80亿参数规模,基于Ministral-3-8B-Instruct-2512架构开发,专为金融、医疗等高风险高精度需求场景设计;高效版Nemotron-3-Embed-1B-BF16参数规模11.4亿,通过蒸馏技术从30亿参数模型压缩而来,在保持85%检索精度的同时将推理延迟降低40%;Blackwell架构优化版Nemotron-3-Embed-1B-NVFP4则采用全新量化技术,在相同精度下内存占用减少30%,吞吐量提升最高达2倍。

该系列模型配备32K超长上下文窗口,通过优化检索策略显著减少重复查询。实测数据显示,在处理复杂知识库时,模型可将无效推理触发频率降低60%,Token消耗量减少45%。这种设计特别适用于需要实时交互的智能客服、法律文书分析等场景,有效平衡了响应速度与资源消耗。

在权威基准测试中,Nemotron-3-Embed-8B-BF16表现突出:在RTEB检索嵌入基准测试中以78.5%的准确率登顶榜首,在MMTEB海量文本嵌入基准测试中取得75.5%的优异成绩。RTEB作为Hugging Face与MTEB社区联合推出的新型评估标准,专门针对RAG系统和AI智能体的实际检索质量设计,包含超过200万条真实场景测试数据。

技术文档显示,所有版本均支持FP8混合精度训练,并配备完整的微调工具包。开发者可根据具体硬件环境选择不同量化方案,在NVIDIA H100 GPU上,8B版本推理速度可达每秒1200次查询,1B版本更突破每秒3500次。模型同时支持TensorRT-LLM优化,在A100 GPU上可实现1.3倍的加速效果。

此次开源包含完整的模型权重、训练代码和部署脚本,覆盖从数据预处理到服务化部署的全流程。英伟达特别强调,通过NVIDIA NIM微服务,企业可在15分钟内完成模型部署,较传统方案提速80%。该系列模型已与LangChain、LlamaIndex等主流RAG框架完成适配,开发者可直接调用API实现知识库增强应用。

苹果日本线上商店全系iPhone调价,进出口成本抬升或为涨价主因
来源:环球网 外媒报道称,苹果日本线上商店已完成全系iPhone调价,覆盖iPhone 16、iPhone 17全系列以及iPhone Air机型。这是苹果继上月全球上调Mac、iPad电脑平板售价后,又一…

2026-07-18

苹果与美司法部洽谈和解 持续两年智能手机反垄断诉讼现重要转机
【环球网科技综合报道】7月18日,据外媒9to5mac报道,彭博社独家消息称苹果正与美国司法部深度洽谈和解方案,有望终结这场始于2024年的智能手机反垄断诉讼,持续两年的科技巨头监管拉锯迎来重要转机。 为化…

2026-07-18

京东工业WAIC展风采:AI智采管家助力中小制造企业采购数智化升级
据京东工业相关负责人介绍,AI智采管家的能力沉淀于京东工业多年积累的工业品商品知识库与供应链数据,通过智能体形态输出,使得原本分散在平台系统中的AI能力得以产品化、标准化,从而能够规模化服务于海量中小企业客户…

2026-07-17