Hacker News AIT2·68 分
谷歌 EmbeddingGemma 2 改造为本地语音转文字:MacBook Air 13 秒转录 1 小时音频,仅训练轻量读取器
原标题:An hour of audio transcribed in about 13s on MacBook Air
- 核心创新在于不重新训练大模型,而是冻结 EmbeddingGemma 2 的音频编码器,仅训练一个小型“读取器”将音频特征映射到共享文本嵌入空间。
- 性能极致优化:利用 Apple Silicon 的 Neural Engine,在 8GB 内存的基础款 M3 MacBook Air 上实现 288x 实时速度(1 小时音频 12.6 秒完成)。
- 隐私与部署优势:模型文件仅 715 MB,完全离线运行,支持全局快捷键听写,适用于对隐私敏感的低算力终端场景。