应用评测与监控
共 138 个AI 用户与开发者推荐的应用评测与监控。
Promptmetheus
promptmetheus.comPromptmetheus 是一个提示词工程 IDE,支持 150+ 模型,提供版本管理、自动评估和成本估算。
Scale Spellbook
scale.comScale AI 的企业级生成式 AI 平台,用于构建、部署和持续优化基于自有数据的 AI Agent。
Claude Code 与多智能体的实时可观测性仪表盘,可回放会话并统计 token 用量。
开源 RAG 与代码输出幻觉检测工具,可定位答案中无依据的具体字符片段
开源 TypeScript AI Agent 框架与工程平台,支持记忆、RAG、工作流、MCP 与可观测性
自动生成、测试并排名提示词的开源工具,用 ELO 评分找出最佳 prompt。
Cleanlab Trustworthy Language Model (TLM)
help.cleanlab.aiCleanlab 的可信语言模型,为任意 LLM 输出实时打分,检测幻觉与错误回答。
本地只读的 Claude Code 会话观测工具,实时可视化模型调用、工具、子代理与上下文占用
零配置 HTTP 代理与实时仪表盘,透明记录 Claude Code、Codex 等 AI 编程 Agent 的每次 API 调用与成本。
Oodle AI LLM Cost Calculator
oodle.ai免费的 AI 智能体 LLM 成本计算器,可按单步、单次运行和每月估算各主流模型的 token 成本。
Portkey
portkey.ai面向生成式 AI 团队的全栈 LLMOps 平台,提供 AI 网关、可观测性、护栏与提示词管理。
Claude Code 插件,追踪 token 用量、识别浪费的上下文,节省 30-50% API 成本,全本地零配置。
基于 OpenTelemetry 的 Claude Code 可观测性方案,用 Grafana 监控用量、性能与成本。
为 AI 编程 Agent 提供版本控制,记录每一步操作,可将代码行追溯到具体提示词。
telemetry.dev
telemetry.dev基于 OpenTelemetry 的 LLM 可观测性平台,追踪 AI 智能体调用链,监控 token、成本、延迟与错误。
AI Agent 的“时间旅行”工具:录制、回放、分叉和调试任意模型的 Agent 运行。