Agent Lens

🔍 AI 成本监控与优化专家

本地 LLM API 调用监控工具,自动追踪 token 消耗与成本,支持多供应商模型,助力优化 AI 开支。

收藏
5.8k
安装
2.1k
版本
2.14.0
CLS 安全扫描中
预计需要 3 分钟...

使用说明

Agent Lens 综合评估

Agent Lens 是一款专注于 LLM API 调用监控与成本分析的 Python 工具,支持 OpenAI、Anthropic、Google、DeepSeek 等主流供应商。其核心功能包括自动 token 计量、实时成本估算、调用延迟追踪及多维度报表生成。

核心用法

提供三种集成方式:装饰器(@track)实现零侵入埋点、上下文管理器(trace)支持灵活手动标注、以及直接记录(record)API。CLI 工具链完善,涵盖统计概览、成本排行、近期调用、数据导出等功能。数据本地存储于 SQLite,无需云端依赖。

显著优点

  • 多供应商支持:内置 10+ 主流模型的实时定价数据
  • 成本可视化:百分比条形图直观展示支出分布
  • 优化建议内置:主动推荐模型降级策略(如 gpt-4o → gpt-4o-mini 可省 90%)
  • 隐私优先:完全本地存储,无数据外泄风险
  • Hermes 生态集成:原生支持框架级调用追踪

局限性与风险

  • Token 提取依赖 OpenAI 格式:非兼容响应需手动设置 token 数
  • 定价为目录价:实际折扣价可能产生偏差
  • 数据库膨胀:高频调用场景需定期执行 clean 维护
  • 无实时告警:缺乏预算超支的主动通知机制

适合人群

AI 应用开发者、多代理系统架构师、需精细化成本管控的 LLM 重度用户,以及希望优化 prompt 效率的技术团队。特别适合本地开发调试阶段的开支摸底与模型选型验证。

常规风险

成本估算基于静态定价表,促销期或企业协议价用户需人工校准;长期运行需监控存储占用;生产环境建议配合外部监控补齐实时告警能力。

Agent Lens 内容

手动下载zip · 3.6 kB
skill-card.mdtext/markdown
请选择文件