策无遗算网

策无遗算网

全部分类探索

浪潮信息发布"源"Yuan

浪潮信息发布"源"Yuan

北京2024年12月6日 /美通社/ -- 近日,源浪潮信息发布"源"Yuan-EB(Yuan-embedding-1.0,浪潮嵌入模型),信息在C-MTEB榜单中斩获检索任务第一名,发布以78.41的源平均精度刷新大模型RAG检索最高成绩,将基于元脑企智EPAI为构建企业知识库提供更高效、浪潮精准的信息知识向量化能力支撑,助力用户使用领先的发布RAG技术加速企业知识资产的价值释放。

Yuan-EB(版本号Yuan-embedding-1.0) 是源专为增强中文文本检索能力而设计的嵌入模型(也称Embedding模型),在 "源2.0" 大模型的浪潮工作基础上,创新性地采用了"源2.0-M32"大模型进行数据重写与合成,信息并通过索引技术、发布样本排序等系列方法完成高质量微调数据集构建,源能够有效提升RAG系统的浪潮检索精度。 

C-MTEB是信息目前业内最权威的嵌入模型测试榜单。其中,检索任务(Retrieval)是检索增强生成(RAG)场景下最为重要、应用最广泛的任务能力,考察的是Embedding模型从大量的数据集中找到并返回与给定查询最相关或最匹配的信息的过程。"源"Yuan-EB基于该任务提供的医疗、新闻、电商、娱乐等8个中文文本数据集,实现了业界领先的海量文本检索精度。

“源”Yuan-EB 在Hugging Face的C-MTEB榜单中排名第一
“源”Yuan-EB 在Hugging Face的C-MTEB榜单中排名第一

"源"Yuan-EB助力RAG检索精度新高

嵌入模型在RAG流程中扮演着关键角色,它能够将复杂的高维数据(例如文本、图像或音频)转换为机器可理解的向量形式,直接决定了RAG检索的精准性和效率。

 "源"Yuan-EB通过数据准备与模型微调两个方面的技术创新,实现了模型精度的大幅提升:

  • 在数据方面,基于"源2.0"微调阶段的问答数据进行清洗与筛选,构建问题(query)与文本(corpus)数据集;使用"源2.0-M32"对C-MTEB 训练数据进行重写与合成,通过索引技术与排序模型进行高效的难负样本提取,完成大规模难负例样本挖掘,形成高质量微调数据集;
  • 在微调方面,通过两个阶段的领先微调方法实现模型能力提升。第一阶段,使用各个领域(医疗、新闻、长文本、娱乐等方向)的大规模数据进行对比学习训练;第二阶段,采用"源2.0-M32"生成的合成数据进一步微调,并使用MRL方法完成"源"Yuan-EB训练;

"源"Yuan-EB为用户提供了大模型企业知识库应用开发的最优模型选择,能够在RAG流程的多个方面起到显著的精度提升,包括信息检索的准确性、处理大规模数据的效率、消除语义歧义、降低计算成本、增强对长文档的处理能力以及模型鲁棒性等,最大化提升RAG流程的整体性能和应用效果。

元脑企智EPAI集成"源"Yuan-EB,加速知识库构建与性能提升

目前,"源"Yuan-EB已经在开源社区和企业大模型开发平台元脑企智EPAI中全面开放下载。用户可以在元脑企智EPAI平台中快速使用"源"Yuan-EB,并结合EPAI自研的多阶段RAG技术,零代码、低成本地基于企业数据构建大模型知识库应用。

企业大模型开发平台"元脑企智"EPAI(Enterprise Platform of AI),是浪潮信息为企业AI大模型落地应用打造的高效、易用、安全的端到端开发平台,提供数据准备、模型训练、知识检索、应用框架等系列工具,支持调度多元算力和多模算法,帮助企业高效开发部署生成式AI应用、打造智能生产力。

元脑企智EPAI已经支持超过13种类型文档的信息识别与提取,结合创新的多级混合检索策略,有效提升元脑企智EPAI在管理、解析、检索知识库与生成内容方面的最终效果,帮助企业用户实现基于私有数据、行业数据下的精准检索、精准问答,确保专业场景下大模型生成内容的准确性和可靠性,加速大模型创新力释放。

友情链接: 荣耀X50GT搭载5800毫安时超耐久电池:4年无忧使用!新款保时捷Taycan刷新纽北电车的纪录:超越特斯拉!红米K70好评率达98%:2000华硕天选5Pro开启预约:搭载新一代CPU 1月9日开售!集中学习 现场交流 进德修业 提升综合素养北美商业分析硕士学位谷歌改善初代Pixel Watch缺点!将会有手机同步功能抖音直播新版健康分处罚生效 303名主播被禁收礼物破难题 冲在前 义务救援50余次提升改造体育场地 助力市民强身健体曝料称华为目前已停止与懂车帝、汽车之家等平台合作树牢工业强县目标 促进工业经济高质量发展贾跃亭法拉第未来2023年只卖出10辆车 大多卖给自己人三星新品发布会公开!推最新Galaxy高端设备 支持AI公益讲座走进社区 儿童畅享“科幻盛宴”美国大法官称:AI会改变运作方式 但目前无法取代人类破难题 冲在前 义务救援50余次抖音直播新版健康分处罚生效 303名主播被禁收礼物不忘初心 牢记使命 积极投身下一代工作树牢工业强县目标 促进工业经济高质量发展一加Ace3正式发布:全球首发1.5K东方屏 2599元起!电视开机率跌至30%!专家吐槽视频平台是罪魁祸首ROG枪神8系列游戏本价格公布:新款处理器 11499元起!12306推出购票新功能!预填信息后买票流程更快签订承诺书 构筑拒腐防变防线花开春意浓景美人陶醉曝料称华为目前已停止与懂车帝、汽车之家等平台合作一加 Ace 3 搭载 5500mAh 电池,续航体验领先同档北美商业分析硕士学位加大执法力度 整治市场乱象参与无偿献血 发扬雷锋精神破难题 冲在前 义务救援50余次荣耀X50GT搭载5800毫安时超耐久电池:4年无忧使用!石棉县城北中学:开展植树节主题宣传教育马斯克卖推特?X平台估值仅剩马斯克收购时三分之一美国伯克利大学数据分析专业花开春意浓景美人陶醉北美商业分析硕士学位便民服务“零距离”关爱居民“心贴心”ROG枪神8系列游戏本价格公布:新款处理器 11499元起!

外链: