工具简介
Openlit 是「开发者工具与 API」分类下的一款 AI 工具，需付费订阅使用，可在网页端上使用。官网为 openlit.io。
如何使用
- 打开 openlit.io 并注册账号，了解可用的能力与配额
- 按文档创建项目或获取访问凭证
- 在本地或测试环境按示例完成一次最小调用
- 验证通过后接入正式项目，逐步扩大使用范围
查看官网原文（英文）
以下为收录时的原文，语言与页面不同，未做翻译。
OpenLIT is an open‑source observability platform for large‑language‑model applications, offering distributed tracing, real‑time monitoring, model evaluation, prompt versioning, fleet telemetry, and a zero‑code Kubernetes operator to integrate with major LLM providers and vector databases.
官网介绍
Trace LLMs and AI agents with OpenTelemetry, run LLM evaluations, manage prompts, compare models, store API keys in Vault, and self-host free under Apache 2.0.
官网要点
- Prompt management
- AI agent monitoring
- API key management
官方常见问题
- What is OpenLIT?
- OpenLIT is an open source Harness Engineering platform. Teams use it to instrument AI apps, manage prompts, run LLM evaluations, monitor agents, store API keys in Vault, and improve quality with production data. It is built on OpenTelemetry and free to self-host under Apache 2.0.
- What is harness engineering?
- Harness engineering is the loop of instrument, develop, manage, observe, and improve AI systems. OpenLIT is the open source Harness Engineering platform for that loop, and also an open source AI engineering platform for tracing, prompts, evaluations, and secrets.
- Does OpenLIT support LLM tracing and OpenTelemetry?
- Yes. OpenLIT provides OpenTelemetry-native LLM tracing and metrics. Use OpenLIT SDKs for Python, JavaScript, and Go, or send OTLP from OTel SDKs, OBI, OpenLLMetry, and other OpenTelemetry sources.
- Can I run LLM evaluation and LLM-as-a-judge in OpenLIT?
- Yes. OpenLIT supports LLM evaluation with LLM-as-a-judge, heuristics, and human review. You can score production traffic or experiments, including relevance, accuracy, safety, and RAG quality signals.
- Does OpenLIT include prompt management?
- Yes. Prompt Hub lets you version prompts, deploy updates, and roll back without shipping app code every time. That keeps prompt management and prompt engineering in one place for the team.
- Can I compare LLM models side by side?
- Yes. OpenGround is a model comparison playground. Test prompts on real inputs and compare models side by side before you ship.
编程与调试 · 常用提示词
下面这些都能直接复制，把里面的变量换成你自己的情况就能用。
- 技术选型：把「我觉得」换成可比较的维度对两三个候选方案按同一组维度打分，给出加权结论，并说明什么条件下结论会反转。
- 引入第三方库之前该查什么从维护活跃度、体积、许可证、安全记录、可替代性五个角度评估一个依赖，给出引入或自研的建议。
- 给代码加注释：解释为什么，不解释是什么只给需要的地方加注释，写清约束与踩过的坑，并顺手产出接口文档。
同类工具怎么选
下面是同一类目下已经写好的对比与替代清单。读完这个工具能做什么，接着看它和谁比、有没有更顺手的方案。
开发者工具与 API类工具的对比
- 扣子、n8n的对比扣子和 n8n 对比：搭建门槛、模型接入、系统集成能力、数据合规与部署方式，附选型结论与组合用法。
- Manus、扣子的对比Manus 和扣子的横向对比：任务执行、可视化编排、渠道发布、可复用性，附选型结论。
- Dify、扣子的对比Dify 和扣子的横向对比：私有化部署、模型自由度、零代码编排、渠道发布，附选型结论。
编程开发类工具的国内替代
- GitHub Copilot 国内替代GitHub Copilot 需要海外订阅与网络。这份清单给出国内可用的替代方案：IDE 内补全、独立 AI 编辑器、中文注释驱动，并说明各自的迁移成本。
- Claude Code 国内替代Claude Code 需要海外网络、订阅与终端授权。这份清单给出国内可用的替代路径：独立 AI 编辑器、IDE 插件、企业可私有化的方案，并说明迁移成本。
- Replit 国内替代Replit 需要海外网络与订阅，国内访问不稳定。这份清单给出可直连的替代方案：在线 IDE、本地 AI 编辑器、插件形态，并说明各自适合什么任务。
对比结论与替代建议为编辑整理，价格与额度以各工具官网为准。