公司动态
开源智能眼镜OpenGlass:如何用不到一杯奶茶的钱,DIY一副会思考的眼镜
开源智能眼镜OpenGlass如何用不到一杯奶茶的钱DIY一副会思考的眼镜【免费下载链接】OpenGlassTurn any glasses into AI-powered smart glasses项目地址: https://gitcode.com/GitHub_Trending/op/OpenGlass想象这样的日常开会时眼镜悄悄帮你把白板上的文字存进笔记走在街头它轻声告诉你眼前这栋建筑是什么翻看一天的照片时每一张都带着AI写好的场景说明。如果告诉你实现这一切的硬件成本不到一杯奶茶的价格所有电路、代码、图纸全部公开可查你还会觉得智能眼镜是巨头专属的黑科技吗这就是开源智能眼镜项目 OpenGlass 正在做的事。它的目标朴素得有点惊人让任何一副普通眼镜都变成可编程、可改造、可理解的 AI 智能眼镜。本文不打算堆参数而是带你把它的里里外外拆开看一遍——看完你会发现所谓智能硬件其实没那么神秘。它要解决的问题智能眼镜为什么一直又贵又封闭市面上的智能眼镜通常遵循同一套商业逻辑整机售卖、系统封闭、功能固定。你想换个AI模型改个交互方式几乎不可能。消费者买到的是一台完成品而不是一个可以继续生长的平台。OpenGlass 的解题思路截然相反它把眼镜拆成一份零件清单 一套开源软件让用户自己组装、自己烧录、自己定义功能。项目描述只有一句话——把任意眼镜变成可黑客的智能眼镜Turn any glasses into hackable smart glasses但这背后藏着三层承诺成本可负担全部元器件加起来不到 25 元人民币原理可理解从固件到App每一行代码都摆在仓库里功能可扩展换模型、改提示词、加传感器都由你说了算。核心观点智能眼镜不该是买来的黑盒子而该是亲手装出来的工具箱。25元智能眼镜 DIY 的零件清单每一分钱都花在哪先别急着下单看看这 25 元到底买到了什么。整机核心由四部分构成仓库的 README 里给出了明确的选型指引组件参考成本为什么选它Seeed XIAO ESP32 S3 Sense约 15 元双核 240MHz自带 Wi-Fi/蓝牙与 PSRAM主控摄像头一体化OV2640 摄像头模块已含于 Sense 板30 万像素足够AI识别物体和文字功耗低3.7V 250mAh 锂电池约 3 元可随时更换支持长时间佩戴3D 打印镜架固定壳约 2 元官方提供 STL 文件可自行修改适配镜框有个细节值得琢磨为什么不选更高像素的摄像头因为 30 万像素对识别物体、转录文字这类任务已经绰绰有余而分辨率每高一档无线传输和推理的负担就成倍增加。这是典型的够用就好工程哲学——把每一分预算花在刀刃上。核心观点好的硬件选型不是堆料而是精确计算每一块钱能换来多少实用能力。开发者戴着 OpenGlass 原型在工作间内测试金属顶棚与天窗下的环境光照正是 AI 识别要面对的日常场景一副 ESP32 智能眼镜制作完成后数据走哪条路硬件只是起点真正让眼镜开窍的是它背后的软件链路。我们可以把整条数据流想象成一条流水线采集端ESP32 S3 板载摄像头每隔一段时间抓拍一张照片固件同时通过 BLE 蓝牙把音频流推给手机传输端手机端的 Expo/React Native 应用通过 Web Bluetooth 与眼镜配对接收照片与音频理解端应用把照片交给 AI 模型生成文字描述再把这些描述交给大模型回答你的提问反馈端答案通过语音合成念给你听形成看见—理解—回答的完整闭环。固件层面音频编码方案是可配置的——firmware/firmware.ino里用注释写得很直白Opus 用于高质量语音仍在开发中、Mu-law 用于 Web 应用、PCM 用于原生应用。你只需改一行宏定义就能切换编码方式。而 AI 层的设计更值得留意。sources/agent/imageDescription.ts里定义了一个默认模型moondream:1.8b-v2-fp16同时支持从轻量的 Moondream、Llama 3 到更强的 LLaVA 34B 等多种选择。你可以把它接入本地 Ollama 服务也可以接 Groq 的云端接口仓库里用llama3-70b-8192做问答还可以用 OpenAI 做语音合成。模块化的sources/modules/目录让每种服务都是一个独立文件想加新供应商照葫芦画瓢即可。核心观点本地推理 可选云端意味着你的视觉数据默认留在自己手里隐私由架构设计保障而不是靠厂商承诺。同一帧画面三种 AI 模型的目光有何不同说了这么多理论不如看一组真实输出。项目仓库的prompts/series_1/目录里存着大量测试照片与对应描述其中 img_1 这张图被三个不同模型分别看过一遍结果很有意思Moondream1.8B 轻量模型客观罗列——一个男人坐在前景中使用手机周围还有其他人在进行各种活动LLaVA-Llama3像写小说——房间中央一个金色卷发的年轻人沉浸在手机里背景的巨大白色管道为空间添了一笔工业感LLaVA 34B像做推理——从建筑特征和周围的乘客判断这很可能是一座火车站。同一个画面轻量模型只描述看到了什么大模型则尝试回答这是什么地方。这不是谁好谁坏的问题而是速度与深度的取舍需要秒级响应的场景选 Moondream需要细致分析的场景换 LLaVA。模型即插即用正是开源架构最直观的红利。开发者在现场协助调试设备印证了这款开源可穿戴设备的迭代离不开真实场景的反复打磨如何一步步搭建属于自己的开源智能眼镜如果你已经心动了完整的搭建路径在项目文档里写得清清楚楚大致分四步第一步准备硬件。按零件清单备齐 XIAO ESP32 S3 Sense、电池与镜架打印官方提供的 STL 固定壳。第二步烧录固件。在 Arduino IDE 中打开firmware/firmware.ino安装 ESP32 开发板支持包选XIAO_ESP32S3板型记得在 Tools 里把 PSRAM 设为 OPI PSRAM然后一键上传。喜欢命令行的朋友也可以用arduino-cli编译firmware/readme.md里有完整步骤。第三步配置应用。克隆仓库、安装依赖、在sources/keys.ts里填入你的 API 密钥。想走本地路线的话先执行ollama pull moondream:1.8b-v2-fp16拉取模型。git clone https://gitcode.com/GitHub_Trending/op/OpenGlass cd OpenGlass npm install npm start第四步连接体验。启动 Expo 应用后打开本地网页点击连接眼镜第一句你好你看到了什么就能从耳机里传回来。核心观点从零件到成品整个流程不超过一下午——这正是开源硬件该有的上手成本。开源可穿戴设备教程之外这个项目还能长出什么OpenGlass 采用 MIT 许可证这意味着你可以随意使用、修改、再分发。项目本身也在持续进化音频编码的 Opus 支持仍在完善官方已把后续开发迁入了新的 Omi 仓库继续演进——一个项目的终点往往是另一个项目的起点。回看仓库结构你能感受到它刻意保留的扩展空间sources/agent/是 AI 代理层sources/modules/是各种服务适配器sources/app/是界面prompts/里甚至躺着生成测试图片描述的工具链。想加健康监测换掉传感器再改改数据流想做工业巡检把提示词改成识别设备铭牌想给孩子做学习助手接一个翻译模型就好。衍生方案不需要官方批准因为扩展能力本身就交到了你手上。从围观到动手只差一次尝试回到开头的那个问题智能眼镜为什么不能便宜、开放、属于每一个人OpenGlass 给出的答案是——它可以只要你愿意亲手组装。25 元买不到一副商业智能眼镜却买得到一次完整的硬件实践、一条 AI 流水线的第一手认知以及一个随时可以改造成你专属形态的开源起点。现在仓库就在那里零件清单、固件、应用、测试数据一应俱全。你可以先读代码再跑 demo最后动手改造。当第一句 AI 描述从你自己的眼镜里流出来时你会明白所谓智能硬件民主化不是等别人把产品做便宜而是让自己成为那个创造者。【免费下载链接】OpenGlassTurn any glasses into AI-powered smart glasses项目地址: https://gitcode.com/GitHub_Trending/op/OpenGlass创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考