MTEB 多语言榜单全球第一:腾讯开源百亿参数模型 KaLM-Embedding
创始人
2025-11-12 16:15:44
0次

IT之家 11 月 12 日消息,腾讯开源官方公众号今日宣布:来自腾讯微信团队的 KaLM-Embedding开源模型再创全球新纪录。在最新发布的 MTEB多语言通用 Embedding 模型权威评测中,新一代通用 Embedding 模型KaLM-Embedding-Gemma3-12B-2511综合成绩全球第一。

▲ 图源:腾讯开源公众号

在涵盖全球 1038 种语言、共计 131 项任务的权威多语言评测体系 MTEB 中,KaLM-Embedding-Gemma3-12B-2511综合得分分别达到 72.32(Mean Task)与 62.51(Mean TaskType),获全球第一。

据腾讯开源介绍,在大模型技术快速发展的背景下,语义理解能力成为人工智能系统落地的关键。Embedding 模型作为实现语义编码的核心技术,通过将文本转化为高维向量,支持非结构化内容可度量、可检索的特性,为上层应用提供基础支撑。

在 RAG(检索增强生成)等主流架构中,Embedding 模型能够从海量知识库中精准检索语义相关信息,动态构建高质量上下文,有效提升大模型生成结果的准确性与可靠性,抑制“幻觉”现象。

此外,Embedding 技术还应用于文本分类、语义匹配、信息聚类、搜索推荐、多语言理解等多个领域,成为现代 AI 系统中不可或缺的语义基础组件。

IT之家附 KaLM-Embedding-Gemma3-12B-2511核心亮点如下:

  • 模型规模:参数量提升至 120 亿(12B),是当前 MTEB 榜单上最大规模的 Embedding 模型之一,显著增强了模型的表示能力与泛化性能。
  • 跨语言能力:在多语言语义对齐方面实现显著优化,支持更精准的跨语种语义理解与检索任务。
  • 数据质量:基于经过深度清洗与筛选的大规模高质量语料进行训练,有效提升语义表示的一致性与可靠性。
  • 训练策略:采用多阶段对比学习、Embedding 蒸馏和模型参数融合等技术,进一步提升模型多维度能力表现与综合性能。
  • 维度嵌套:支持多种向量维度选择,涵盖 3840、2048、1024、512、256、128 及 64 等多个层级,满足不同场景下的高效应用需求。

百亿参数模型 KaLM-Embedding 获取、技术论文等如下:

  • 模型获取:https://huggingface.co/tencent/KaLM-Embedding-Gemma3-12B-2511
  • 讨论反馈:https://huggingface.co/tencent/KaLM-Embedding-Gemma3-12B-2511/discussions
  • 技术论文:https://arxiv.org/abs/2506.20923
  • 开源协议:采用 MIT 许可证,支持商业用途,助力技术广泛传播与应用。

相关内容

热门资讯

国产大模型下调推理服务价格,南... 近日,国内某大模型企业宣布下调其flash系列模型服务价格,输入缓存命中、输入缓存未命中及输出价格最...
解码青年人AI生活《2026有... 中新网深圳9月5日电(记者索有为)《2026有意思生活方式报告》(下称《报告》)4日在全国首个有意思...
OpenAI 最强 AI 生图... 9月9日消息,OpenAI 9 月 9 日官宣发布 ChatGPT Images 2.5,图像生成延...
探索AI供应链产业化路径京东推... 2026年以来,人工智能应用范围加速拓展,持续从数字空间走向现实生活,广泛融入生产线、仓储厂房、配送...
教育部发文!AI生成内容,教师... 一篇论文,因为AI使用不当,相关高校师生被通报处理。 9月2日,安徽财经大学公布“教师与学生涉嫌学术...
AI识别出近800种可充当乳化... 英国利兹大学食品科学与营养学院和爱丁堡大学科学家携手,开发出一款 人工智能(AI)工具,能从数千万种...
搭上低空经济、AI文旅?两连板... 桂林旅游(000978)回应市场热点。 9月8日,桂林旅游再度涨停,斩获2连板。当天晚间,该公司披露...
硅谷:我们不能被硅谷“AI刹车... 【文/底线思维】 OpenAI首席科学家Jakub Pachocki最近写了一篇文章,题目叫《An ...