10+年产品经理专注分享AI 工具、AI 资讯、AI Coding、Vibe Coding与下一代产品创新,按 Ctrl+D 收藏我们
关于我 留言板 标签云 排行榜

苏米客

  • 首页
  • AIGC
    • AI最新动态
    • AI学习教程
    • AI工具集合
    • AI产品百科
    • AI编程开发
    • AI提示词
    • AI开源项目
    • AI智能体
  • Axure
    • Axure动态
    • Axure教程
  • 产品
    • 用户体验
    • 产品设计
    • 苏米杂谈
  • 资源
    • 产品UI组件库
    • 开源图标库
    • 中后台框架
  • 书单
    • AI书籍
    • 用户体验
    • UI视觉
    • 产品研究
    • 其他类型
  • 下载
    • Axure组件
    • Axure原型
    • 文档报告
    • 素材资源
  • 登录
  • 首页
  • AIGC
    • AI最新动态
    • AI学习教程
    • AI工具集合
    • AI产品百科
    • AI编程开发
    • AI提示词
    • AI开源项目
    • AI智能体
  • Axure
    • Axure动态
    • Axure教程
  • 产品
    • 用户体验
    • 产品设计
    • 苏米杂谈
  • 资源
    • 产品UI组件库
    • 开源图标库
    • 中后台框架
  • 书单
    • AI书籍
    • 用户体验
    • UI视觉
    • 产品研究
    • 其他类型
  • 下载
    • Axure组件
    • Axure原型
    • 文档报告
    • 素材资源
当前位置: 首页 » AI最新动态

谷歌开源 EmbeddingGemma 2:全模态嵌入模型,手机断网也能搜照片和视频

1小时前 AI最新动态 9 0

你手机相册里那几千张说好回头再看的照片,这回真有救了。谷歌开源了一个名为 EmbeddingGemma 2 的全模态嵌入模型。照片、截图、视频、录音,你打几个字描述一下,它就能在手机或电脑本地帮你翻出来,全程不用联网。只搜索文字的话,在手机上只占用 191MB 内存。网友评价:"比我微信缓存还小得多。"

EmbeddingGemma 2 搜索效果

实测中,搜"6583"能从一堆照片里翻出写着取件码的快递截图——它事先根本没把图里的字识别出来,全靠看图。中文语音找图 6 次对了 1 次,眼睛很尖,中文耳朵还不太灵。

全模态嵌入:把五种内容标在同一张地图上

嵌入模型名气没有文本模型那么大,可搜索、推荐、AI 知识库(RAG)背后都得靠它。它干的活儿,是把一段内容变成一串数字,相当于在一张地图上给它标个坐标,语义相近的离得近,不相干的离得远。

以前这张地图基本只认识文字,图片得先配文字说明,录音得先转成文字。EmbeddingGemma 2 把文字、代码、图片、视频、音频全都标在了同一张地图上。

全模态嵌入示意

一张火烈鸟的照片、一段火烈鸟的视频、一段解释火烈鸟为什么是粉红色的文字,坐标邻近,你搜其中一个,另外两个也会被带出来。文字描述、代码片段、图片、视频帧、环境声音,全部统一编码,不再需要各自独立的模型。

实测:截图搜索出奇地强

8 张截图和 6 张照片混在一起,16 次搜索有 15 次第一个就对。搜"G1234"找到高铁票,搜"胆固醇偏高"找到体检报告,搜"香山爬山"找到了群聊截图。

截图搜索效果

音频方面,15 段环境声(狗叫、下雨、海浪、翻书),用英文描述去搜,9 次一遍正确;同样的音频换成中文,就只有 4 次正确。用语音找照片,英文准确率出奇得高,中文依旧稍差。

音频搜索效果

技术规格

EmbeddingGemma 2 有 7.4 亿参数,在手机端纯文本搜索只需 191MB 内存。它是谷歌首个同时支持文字、图片、视频和音频的统一嵌入模型。支持多语言,包含中英日韩等多种语言,但中文音频和多模态检索能力仍需提升。

EmbeddingGemma 2 技术架构

应用场景

除了个人相册搜索,EmbeddingGemma 2 还可以用于:

  • RAG 知识库:多模态内容统一索引,不再需要分别处理文本和图片
  • 推荐系统:跨模态相似度计算,图文音视频统一推荐
  • 本地检索:断网可用,完全在端侧运行,不上传数据

EmbeddingGemma 2 网页演示

网页演示中,输入中文"鸟",不到半秒屏幕上就排满了各种鸟的照片。虽然中文音频能力还有待提升,但仅文字和图像搜索能力已经非常实用。

EmbeddingGemma 2 的开源意味着开发者可以在本地部署统一的多模态检索系统,无需依赖云端 API。对于重视数据隐私的场景,这是一个很好的选择。

声明:本站原创文章文字版权归本站所有,转载务必注明作者和出处;本站转载文章仅仅代表原作者观点,不代表本站立场,图文版权归原作者所有。如有侵权,请联系我们删除。
未经允许不得转载:谷歌开源 EmbeddingGemma 2:全模态嵌入模型,手机断网也能搜照片和视频
#谷歌开源 #嵌入模型 #EmbeddingGemma #全模态 #多模态搜索 
收藏 1
Eazo:国内首个图形化Personal Agent,一句话生成专属 APP
Codex、Pi、OpenCode、DeepSeek Harness:四款开源 AI 编程工具深度体验对比
推荐阅读
  • 一文读懂Qwen3 全系 17 款模型,本地与云端的选择与部署建议
  • 7 个最新 AI 模型,一周模型上新速览清单
  • GPT-5.1来了,这次小迭代GPT-5.1 Instant和GPT-5.1 Thinking该怎么选、怎么用
  • OpenAI Workspace Agents 发布:GPTs 已死,云端龙虾限时免费至 5 月 6 日
  • 实测国内首个中文 OpenClaw:Molili,上手顺畅,安全策略与可视化都很能打
评论 (0)
请登录后发表评论
分类精选
Cursor 限制国内使用 Claude 等模型解决方案!
34511 1年前
学生/非学生:如何申请Cursor Pro免费会员,如何通过SheerID验证快速激活全攻略
31067 1年前
即梦AI图片2.1:一句话快速生成带中文的海报图,免费AI文生图、视频工具、AIGC创作工具
23718 1年前
注意!Cursor单设备登录新规:一个账户最多可以3台设备登录,且限制单点登录
23237 1年前
腾讯ima知识库skills上线:教你如何把腾讯 IMA 知识库接入 OpenClaw 一步打通
21672 6月前
国产大模型横向对比:Kimi K2.6、GLM-5.1、Qwen3、MiniMax M2 四大模型选型指南
19249 5月前
字节推出Trae CLI :Claude Code 和 Gemini CLI的国产平替 ?手把手教你如何安装Trae Agent
18868 1年前
Trae国内版,搭载 doubao-1.5-pro、DeepSeek R1/V3模型,对比 Trae 国际版有什么不同
18616 1年前
DeepSeek宣布:降价,最高降价75%!别错过这个优惠时段,赶紧充值
18376 1年前
刚刚!Cursor风控又加强了,可能是因为这个原因!
16805 1年前

文章目录

关于苏米客
分类排行
1 谷歌开源 EmbeddingGemma 2:全模态嵌入模型,手机断网也能搜照片和视频
2 Qwen-Image-2.1 Pro、Turbo API 正式上线,让图像生成与编辑走进你的应用
3 腾讯WorkBuddy更新独立文件浏览器:AI直接修改原文件,不用搬来搬去
4 Claude Haiku 5.5发布:小模型能力暴涨56倍,AI Agent价格打到骨折
5 GPT-6 Intelligent UI上手指南:ChatGPT直接生成交互界面,不再需要提示词技巧
6 ChatGPT上线Intelligent UI:GPT-6让每个回答都变成交互式界面
7 Claude Dashboards + Motion:一句话生成数据看板和动画短片,Docs/Slides/Design 正式免费
8 Hermes Index 排行榜:Claude Opus 5.5 登顶 Agent 性能榜,14 个模型成本差 215 倍
9 微信全面AI化:28个小微入口最全盘点,Personal Agent已来
10 Anthropic发布新使用政策:禁止辱骂Claude,2026上半年封禁1140万账号
苏米客
登录 注册
显示
没有账号? · 立即注册
显示
已有账号? · 直接登录
登录代表你已同意 用户协议 和 隐私政策
©2015-2024 苏米客XMSUMI 版权所有 · WWW.XMSUMI.COM 闽ICP备14005900号-6 网站地图 百度地图
微信文章助手 程序库 免费影视APP 免费字体下载 产品经理导航 爱克硕儿 产品经理AI资讯 Axure元件库下载 申请友联