aiknow

应用评测与监控

共 138 个AI 用户与开发者推荐的应用评测与监控。

全部 模型开发训练与微调 / 量化 39数据集 / 数据标注 43AI 安全 / 护栏 87AI 抓包 / 流量分析 28AI 逆向 / 二进制分析 46AI 网络 / 代理分流 7应用评测与监控 106开发 SDK / 工具库 50

Agent Lab Deploy

agentlab.cresclab.com

从 Claude Code 或 Codex 聊天中一键部署应用到 Google Cloud,支持预览、回滚与密钥扫描。

免费+付费支持 MCP有 APIClaude网页命令行
应用评测与监控 · 1 处推荐

浏览器端LLM模型指纹检测工具,通过随机数生成模式识别模型,与59个参考模型比对。

开源免登录中文界面网页
应用评测与监控 · 1 处推荐

ZebraBench

sujee.github.io

浏览器内直接对 LLM 推理端点做基准测试,测量速度、吞吐、延迟、准确率、token 用量与成本。

免登录网页
应用评测与监控 · 1 处推荐

Driftline

aidriftline.com

扫描代码中的 AI 模型 ID,提前预警模型下线,并用真实提示词对比替换模型效果。

免费ClaudeGeminiGPT
应用评测与监控 · 1 处推荐

Veqen

veqen-app.com

AI 成本监控与防欺诈工具,汇总各供应商、智能体及自有 GPU 支出,发现异常与被盗密钥。

有 API网页
应用评测与监控 · 1 处推荐

Starseer

starseer.ai

Starseer 是 AI 运行时安全平台,可在模型运行中检测后门并拦截越界的 MCP 工具调用。

支持 MCP网页
AI 安全 / 护栏 · 1 处推荐

Openlayer

openlayer.com

面向受监管企业的 AI 治理与可观测平台,可测试、监控并治理所有模型、Agent 与 AI 系统。

有 API网页
应用评测与监控 · 1 处推荐

LLMStack

llmstack.ai

无代码平台,用自有数据快速构建生成式 AI 应用、聊天机器人和 Agent。

多模态GPT网页
应用评测与监控 · 2 处推荐

agent-blackbox

github.com★ 5

本地优先的 AI 编程 Agent 会话黑匣子,可回放、归因与对比 DSH/Claude Code/Codex 会话。

开源可自部署中文界面ClaudeDeepSeek命令行
桌面 Agent 客户端 · 1 处推荐

FDE Gym

github.com★ 106

面向 LLM 时代的在线评测平台,用真实客户交付案例考察 FDE 用编程 Agent 落地的能力。

开源可自部署网页
应用评测与监控 · 1 处推荐

Orloj

github.com★ 126

开源多智能体编排运行时,用 YAML 声明智能体、工具与策略,支持调度、执行、路由与治理。

开源可自部署有 API网页命令行Linux
Agent 开发框架 · 1 处推荐

TasteBench

omneky.com

Omneky 推出的广告生成效果评测基准,用同一批广告需求横向对比 ChatGPT、Gemini 与 Omneky 的生成质量。

多模态GPTGemini网页
应用评测与监控 · 1 处推荐

C3 AI

c3.ai

面向企业的行业 AI 软件公司,提供 Agentic AI 平台与预置行业应用。

有 API网页
应用评测与监控 · 1 处推荐

iFixAi

ifixai.ai★ 25,548

面向 AI Agent 的独立审计平台,通过 GitHub 或 MCP 接入,覆盖 64+ 类失准风险,出具第三方信任报告。

支持 MCP网页
AI 安全 / 护栏 · 2 处推荐

CCTest

cctest.ai

Claude 中转站检测平台,黑盒检测是否掺假、降智、套壳,不上传密钥。

免登录Claude网页
应用评测与监控 · 1 处推荐

Project Arena

github.com★ 6

厂商中立的 Kubernetes 故障基准,用于评测 AI 调查工具在检测、诊断和缓解上的表现。

开源可自部署GPT命令行LinuxMac
应用评测与监控 · 1 处推荐

skill-placebo

github.com★ 3

用安慰剂对照法测评最热门编程 Agent Skills 的开源基准项目,发现多数技能并不优于等长中性文本。

开源可自部署Claude命令行
应用评测与监控 · 1 处推荐

Lumina

github.com★ 10

开源、自托管的 LLM 应用可观测性平台,追踪成本、延迟与质量,基于 OpenTelemetry。

开源有 API可自部署LinuxMac网页
应用评测与监控 · 1 处推荐

ClawCaretaker

clawcaretaker.com

独立监控自主 AI 代理的心跳、能力与行为变化,异常时提醒人工审查。

免费+付费有 API网页
应用评测与监控 · 1 处推荐

Agent Assurance

testmuai.com

TestMu AI 推出的 AI Agent 测试工具,通过 Rook CLI 验证 Agent 实际执行效果而非自述,支持对抗性测试。

命令行网页
应用评测与监控 · 1 处推荐

Dedica

getdedica.com

检测网站对 AI 智能体的可用性并打分,提供修复工具包。

免费+付费免登录ClaudeGPT网页
应用评测与监控 · 1 处推荐

Obligra Verify

obligra.ai

面向 AI 辅助工作流的决策记录留存与审计工具,可检索可复核。

免费+付费有 API网页
应用评测与监控 · 1 处推荐

ContextQA

contextqa.com

AI 测试自动化平台,自动生成测试、修复选择器,并验证 AI Agent 的幻觉与工具调用。

支持 MCP有 API网页
应用评测与监控 · 1 处推荐

AgentLens

github.com★ 4

开源自托管 AI Agent 可观测性工具,支持工具调用追踪、决策树可视化与 AI 失败分析。

开源有 API支持 MCP可自部署GeminiGPT
应用评测与监控 · 1 处推荐