该应用最大的特点就是不需要将数据发送到云端,HuggingSnap应用使用HuggingFace内部的视觉模型smolvlm2来实时分析手机看到的内容。
用人工智能配合摄像头进行实时物理识别并不是新鲜事,ChatGPT等应用已经提供类似功能,但HuggingSnap的特点在于完全基于本地AI模型进行计算。
HuggingFace表示:HuggingSnap可以离线工作、节省电量并在手机上处理所有数据,该应用在购物、旅行、学习或只是探索周围环境时非常有用,HuggingSnap为您的iPhone带来智能视觉AI。
实际上该应用的用途非常广泛,例如帮助儿童了解周围的物体、帮助爱好者了解花草树木、帮助视觉障碍者播报和描述周围的物体等等。
只是smolvlm2模型在本地运行那么必然对算力有要求,HuggingFace并未提到机型限制,或许是这个模型经过优化已经可以在iPhone上运行。
另外该应用不仅支持在iOS18+系统上运行,还支持在macOS15.0+系统上运行,但仅限于搭载AppleM芯片的Mac,不支持搭载英特尔CPU的Mac,最后还支持visionOS2.0+。
【查看完整讨论话题】 | 【用户登录】 | 【用户注册】