产品亮点
捕获每一次 LLM 调用、工具执行和检索步骤，以分层跟踪呈现
按用户、会话、延迟、成本或自定义元数据筛选，定位问题更细
支持 LLM 评判、自定义启发式、人工审核三种评估方式
提示 A/B 测试可分割生产流量，比较质量、延迟、令牌和成本
无缝集成 OpenAI、Mistral、Github Copilot 等工具与框架
你能用它做什么
- 开发团队追踪 LLM 调用，发现检索步骤超时导致模型缺少上下文，解决响应失败
- 企业对比两个提示版本，发现版本 B 质量提高18%且令牌减少12%，随后推广
- 数据科学家对生产流量跑评估，把低分响应按失败原因分组分析
怎么用
- 1 注册并登录 Currai，开始7天免费试用
- 2 把它与你使用的模型提供商、开发工具和框架集成，例如 OpenAI、Github Copilot
- 3 开始捕获 LLM 调用、工具执行和检索步骤，查看分层跟踪信息
- 4 按用户、会话、延迟、成本或自定义元数据设置筛选条件
- 5 用评估功能选择 LLM 评判、启发式方法或人工审核来衡量输出质量
- 6 分割生产流量做提示 A/B 测试，比较指标后选定版本
- 7 分析成本跟踪数据，找出让应用变慢或变贵的环节
适合谁使用
AI 开发团队：需要及时发现响应失败原因并衡量生产质量数据科学家：需要比较多版本模型和提示的准确性与效率运维团队：需要监控 LLM 应用运行状态并及时处理性能问题
优点
- 把调用、工具执行、检索步骤放在同一条时间线上，排查问题不用猜
- 评估既能跑生产流量也能跑实验，上线前后都能量化
- 提示管理支持一键部署和回滚，改动风险可控
- 与常见模型提供商和开发工具集成，接入现有流程
局限
- 免费试用只有7天，试用结束后是否续费需提前评估
- 需要在代码中接入并配置埋点，对小团队来说有一次性接入成本
- LLM 评判的结果带有模型偏好，关键结论建议配合人工审核
Currai 是什么
Currai 是一款针对 LLM 应用的可观测性平台，提供7天免费试用。它把每一次 LLM 调用、工具执行和检索步骤记录下来，以分层跟踪的形式摊开，让团队看清一次响应到底经过了哪些环节。它要解决的是 LLM 应用上线后说不清哪里出错、改一版提示不知道有没有变好的问题。
你能用它做什么
- 观测与追踪：按用户、会话、延迟、成本或自定义元数据筛选调用记录
- 评估：用 LLM 评判、自定义启发式或人工审核衡量输出质量，生产流量和实验都能跑
- 提示管理：在代码库之外管理提示，支持一键部署和回滚
- 成本跟踪：对比不同模型和提示的令牌使用与延迟，找出变慢变贵的环节
适合谁使用
- AI 开发团队：需要定位响应失败原因并持续优化提示
- 数据科学家：需要设计实验比较多版本模型和提示的效果
- 运维团队：需要监控线上 LLM 应用的运行状态
需要留意什么
免费试用只有7天，试用结束后是否值得续费要在试用期内就判断清楚。它需要在代码里接入并配置埋点，对小团队来说是一笔一次性成本。另外 LLM 评判本身带有模型偏好，涉及重要决策时建议配合人工审核，不要只看自动评分。
常见问题
免费试用多久？
页面显示提供7天免费试用，试用期后需查看官网定价。
能看到每一次调用的细节吗？
可以。平台捕获每一次 LLM 调用、工具执行和检索步骤，并以分层跟踪形式展现。
提示改版怎么验证效果？
用提示 A/B 测试把生产流量分配到不同版本，比较质量、延迟、令牌和成本后再决定推广哪一个。
支持哪些集成？
页面提到 OpenAI、Mistral、Github Copilot 等模型提供商和开发工具，也支持 OpenTelemetry 等原生工具。
为什么说它免费
官网写明的免费方式： 免费试用免费
免费额度、试用天数与功能范围由官网决定，随时可能调整，请以官网为准。
产品截图
截图归档自收录页面，仅供预览参考。
