Smart Audio Analyzer

🎙️ 持久声纹档案·多引擎智能纪要

业界唯一支持跨录音持久声纹档案的AI音频分析工具,整合多引擎转写、说话人识别与场景化纪要生成,适合会议、访谈、培训等高频录音处理场景。

收藏
4.1k
安装
1k
版本
1.2.1
CLS 安全扫描中
预计需要 3 分钟...

使用说明

核心功能与使用流程

Smart Audio Analyzer 是一款面向专业场景的录音分析工具,其核心价值在于跨会话声纹档案持久化——这是同类产品中罕见的差异化能力。用户上传音频文件后,系统执行六步流水线:转写(AssemblyAI/Whisper/Gemini 三引擎可选)→ 说话人分离 → 声纹档案匹配 → 场景自动识别(会议/访谈/培训/演讲/通用五类)→ 模板化纪要生成 → 档案更新确认。

显著优势

1. 声纹识别深度:不仅依赖文本内容推断说话人,更通过可选的 ONNX 神经网络(WeSpeaker 模型)提取 256 维声纹嵌入,实现音色级匹配;即使关闭该模块,文本型声纹档案(语音模式+内容模式)仍可跨录音追踪人物。
2. 场景智能适配:内置五类场景模板,自动触发对应纪要结构(如赛艇训练关注桨频节奏,访谈聚焦痛点挖掘),避免"一刀切"摘要。

3. 引擎弹性冗余:默认 AssemblyAI(云端质量最优),网络受限时自动降级至本地 Whisper,兼顾质量与可用性。

4. 隐私架构清晰:声纹向量本地存储(voice-db.json),永不外泄;仅音频转写环节可能上云(可强制离线)。

潜在局限与风险

  • 配置门槛:需 Node.js 18+ 环境,多引擎 API 密钥管理复杂,Python 可选依赖(numpy/librosa/onnxruntime/ffmpeg)对非技术用户不友好。
  • 声纹精度边界:短片段(<10秒)或低信噪比录音的说话人分离准确率下降;中文声纹模型基于 CN-Celeb,对方言/童声覆盖有限。
  • 成本波动:AssemblyAI 按分钟计费,长录音场景(>100MB)可能产生意外费用,本地 Whisper 则消耗 GPU/CPU 资源。
  • 权限暴露面:需要 shell_exec 调用 ffmpeg 进行音频切片,若输入路径未严格校验存在路径遍历风险;网络权限涵盖多家云服务商,TLS 证书劫持可导致转写内容泄露。

适用人群

高频处理录音的专业人士:产品经理(用户访谈纪要)、项目经理(站会/评审会)、研究员(定性访谈)、教练/运动员(训练复盘)。尤其适合需长期追踪固定参与者的场景(如季度复盘会议中的核心成员识别)。

安全建议

建议启用 .env 隔离 API 密钥,定期审计 references/voice-db.json 敏感数据,对不可信来源音频启用 ffmpeg 沙箱执行。

Smart Audio Analyzer 内容

references文件夹
scenes文件夹
scripts文件夹
手动下载zip · 25.6 kB
general.mdtext/markdown
请选择文件