产品库

Currai提供LLM可观测性、追踪、评估和提示A/B测试等功能。

Currai是一款针对LLM应用的可观测性平台。其重要性在于帮助团队更好地管理和优化LLM应用。主要优点包括能够追踪每个提示、令牌和工具调用，在生产环境中运行评估和提示A/B测试，让团队有信心发布产品。产品背景是为了解决LLM应用在开发和部署过程中的可观测性难题。它提供7天免费试用，定位是为开发和管理LLM应用的团队提供全面的可观测性解决方案。

专为MCP服务器提供可观测性，适用于SaaS工程团队。

Spanly是一款针对模型上下文协议（MCP）服务器的可观测性工具，由SaaS工程团队开发，用于生产环境中运行MCP的场景。它可以与Datadog、Sentry或New Relic等现有APM工具配合使用。产品提供免费、专业版和企业版三种价格方案，免费版无需信用卡，专业版每月49美元，企业版每月249美元。其主要优点是无需代码更改，能对MCP流量进行实时监控，为工程团队提供详细的性能分析和错误跟踪。

Chainlit助力构建可靠对话式AI，提供LLM应用可观测性与分析平台

Chainlit是一款为开发者和企业打造的AI开发工具，旨在构建、改进和扩展AI应用程序。其重要性在于提供了一套完整的解决方案，从构建对话式AI应用到评估AI系统，再到提供可观测性和分析平台，帮助用户更高效地开发和管理AI应用。主要优点包括支持多种认证方式、可定制前端和聊天组件、提供与流行框架和LLM提供商的集成等。产品背景信息显示，每月有50k开发者使用，拥有9K Github Stars和4.5K Discord成员。目前未提及价格信息。产品定位为帮助开发者和企业快速、可靠地开发和部署AI应用。

Opik是端到端AI可观测性平台，可测试、优化和监控AI代码。

Opik是Comet创建的端到端AI可观测性平台，为开发者提供最佳的代理测试、优化和监控功能。其重要性在于帮助开发者解决LLM模型黑盒问题，能清晰了解模型行为，快速调试和迭代。主要优点包括真正开源、企业级可靠性和安全性、灵活的托管和部署选项以及易于集成。产品背景是Comet针对AI开发者在模型评估和优化方面的需求而开发。价格方面提供免费试用。定位是面向AI开发者和团队，助力他们高效开发和管理AI项目。

持续改进AI智能体，具备可观测性、评估、追踪和实验功能

Arize AI是一个专注于AI智能体可观测性、评估与改进的平台。其重要性在于帮助AI工程师更好地管理和优化AI智能体，提升性能和可靠性。主要优点包括提供全面的评估框架、支持大规模的追踪和评估、能快速测试提示和工具等。该平台基于开源和开放标准构建，具有高度的可控性和透明度。产品定位为服务全球领先的AI团队，助力他们实现AI智能体的持续学习和自我提升。关于价格，文档中未明确提及，可能提供免费试用或付费服务。

开源可观测性工具，基于OpenTelemetry，集成APM、日志、追踪等功能

SigNoz是一个由OpenTelemetry驱动的开源可观测性工具。它的重要性在于为开发者和运维团队提供了统一的平台来监控应用程序的性能、日志、追踪等。主要优点包括基于开放标准，无专有锁定，提供简单的基于使用量的定价模式，可在云端或自有基础设施上运行。产品背景是2020年创立，旨在为开发者提供更好的可观测性解决方案。价格方面，有免费的社区版可供自托管，也有基于使用量定价的云版本。定位是作为Datadog或New Relic等工具的开源替代方案，满足开发者和企业对应用程序可观测性的需求。

OpenTelemetry原生可观测性平台，降本80%，含追踪、指标和日志。

OpenTelemetry-Native Observability Platform是基于OpenTelemetry的可观测性平台。OpenTelemetry是云原生计算基金会（CNCF）的开源项目，致力于为云原生软件提供统一的可观测性解决方案。该平台核心功能是跟踪、指标和日志管理，能帮助企业实时监控系统运行状态，及时发现并解决问题。其重要性在于应对现代复杂分布式系统的监控需求，提升系统稳定性和性能。主要优点包括降低80%的可观测性成本，提供可预测的定价模式，用户可选择免费自托管或使用Uptrace Cloud服务。定位是为企业提供高效、经济的可观测性解决方案。

Superlog提供全量可观测性，零麻烦，自动添加日志、追踪和指标。

Superlog是一款专注于代码可观测性的工具，它利用OpenTelemetry技术，为开发者提供全面的日志、追踪和指标管理。其重要性在于帮助开发者快速定位和解决代码中的问题，提高开发效率。产品的主要优点包括全量可观测性、自动添加日志和指标、避免观测性衰减、合并相似错误、提供严重程度和影响评估、准备解决方案PR等。产品背景信息暂未提及，价格信息也未在文档中明确体现，产品定位为帮助开发者更高效地进行代码调试和问题解决。

Respan是统一可观测性、评估、提示优化和LLM网关的工程平台。

Respan是一个LLM工程平台，它将可观测性、评估、提示优化和统一的LLM网关集成于一体。其重要性在于帮助团队可靠地部署AI应用，确保AI系统按预期运行。主要优点包括提供端到端的执行路径追踪、灵活的评估工作流、有效的优化机制、便捷的部署方式以及实时监控功能。产品背景信息暂不明确，价格方面提供免费试用。其定位是为处理大量API调用、需要确保AI系统可靠性和高效性的团队提供支持。

Automate on - call runbook, cross - reference logs, metrics, traces, and codebase to root - cause issues.

Struct是一款用于自动化解决值班问题的工具，由Y Combinator支持。它能跨参考日志、指标、跟踪和代码库，主动找出工程警报和错误的根本原因。该工具支持与众多领先的可观测性和警报平台、云日志提供商以及工作工具集成，数据逻辑隔离且符合SOC2和HIPAA合规标准。价格方面，提供免费版、20美元/月的专业版、最高200美元/月的流行版以及企业版，企业版可联系获取定制方案，还提供年度折扣和随时充值额外积分的服务。其定位是帮助快速发展的团队提高解决问题的效率，节省开发时间。

开源平台，提供LLM应用的提示管理、评估和可观测性工具。

Agenta是一个开源的LLMOps平台，专为LLM开发团队提供基础设施。其重要性在于解决了AI团队在LLM开发中的诸多问题，如工作流程分散、缺乏可观测性和调试困难等。产品的主要优点包括集中管理提示、评估和跟踪信息，支持团队协作，提供统一的实验和评估环境，以及模型无关性等。产品背景是随着大语言模型的广泛应用，开发团队需要更高效的工具来管理和优化开发流程。价格方面文档未提及，定位是成为LLM开发团队的一站式解决方案，帮助团队遵循LLMOps最佳实践。

Gen AI Toolbox for Databases 是一个开源服务器，用于简化与数据库交互的 Gen AI 工具的开发。

Gen AI Toolbox for Databases 是一个开源工具，旨在帮助开发者更轻松、快速且安全地构建与数据库交互的生成式 AI 工具。它通过处理连接池、身份验证等复杂性，简化了工具的开发和部署过程。该工具支持多种数据库，包括 AlloyDB、Cloud SQL、MySQL、PostgreSQL 等，并提供端到端的可观测性支持，如 OpenTelemetry 集成。它适用于需要高效开发和安全访问数据库的应用场景，目前是免费开源的。

Inferable 是一个开源平台，用于创建内部运营的对话式 AI 代理。

Inferable 是一个专注于内部运营的对话式 AI 代理平台，旨在帮助企业和团队整合内部系统、碎片化代码库和一次性脚本。通过对话式代理，企业可以减少在内部工具开发上的时间投入，提高工作效率。该平台支持多种编程语言的 SDK，包括 Node.js、Golang 和 C#，并计划扩展更多语言支持。其核心是一个分布式消息队列，确保 AI 自动化的可扩展性和可靠性。此外，Inferable 提供了丰富的功能，如分布式函数编排、人类在循环（Human in the Loop）、代码重用、语言支持、本地执行、可观测性和结构化输出等。它还内置了 ReAct 代理，能够通过逐步推理解决复杂问题，并调用函数解决子问题。Inferable 完全开源，支持自托管，用户可以在自己的基础设施上运行，确保数据和计算的完全控制。其定价和具体定位信息在页面中未明确提及，但从其功能和目标受众来看，主要面向企业级用户，特别是需要高效内部运营和数据隐私保护的团队。

自动化监控平台，简化故障排查。

Edge Delta 是一个自动化的监控平台，它使用 AI/ML 技术自动检测异常并发出警报，无需手动设置警报阈值或预测监控条件。该平台提供辅助故障排查功能，通过汇总日志数据，帮助用户快速定位问题和受影响的资源。Edge Delta 还支持 PB 级日志搜索，允许用户存储和搜索所有数据，无需采样或过滤事件以控制成本。此外，Edge Delta 被 Gartner 评为 2023 年监控和可观测性的 Cool Vendor，并且是 SOC 2 Type 2 认证的，可以支持敏感的、关键的任务信息。

AI 助力观测

Observo.ai 是一款 AI 助力的观测工具，可以帮助用户降低观测成本 50% 以上，同时将故障解决速度提升 40%。它通过人工智能自动化观测流程，实现更智能、更深入的数据优化，更快速的部署，并实现更大的成本节约。用户可以通过它来优化和减少数据、智能路由数据、检测异常、建立可搜索的低成本数据湖、数据丰富化、敏感数据发现等。Observo.ai 还集成了 40 多个数据源和目的地，为用户提供对观测数据的控制和灵活性。

观测、分析和评估AI代理的可观测性和日志平台

LLMonitor是一个为LLM（语言模型）应用提供观测性、分析和测试的平台。它可以记录LLM的调用日志、指标和追踪，支持对话评估和聊天记录回放，帮助优化AI应用的性能和成本控制。LLMonitor提供了日志监控、性能分析、错误追踪、用户对话记录、用户反馈收集等功能。它适用于各种AI开发场景，包括代理人、聊天机器人等。

中间件观测平台|云原生监控

Middleware是一个云原生监控平台，提供完整的应用和基础设施可观测性，以便您能够大规模监控和诊断问题。它包括基础设施监控、日志监控、应用性能监控、数据库监控、合成监控、无服务器监控、容器监控和实时用户监控等功能。通过使用Middleware，您可以轻松识别、理解和解决云基础架构中的问题。

AI观测和模型监控平台

Censius是一个AI观测和模型监控平台，帮助团队了解、分析和改善AI模型在实际应用中的性能。它提供实时监控、报警通知、数据可视化和性能分析等功能。Censius帮助用户追踪模型的准确性、稳定性和效果，提高模型的可靠性和可解释性。Censius的定价根据使用量和功能套餐进行计费，提供灵活的选择。Censius适用于各种AI应用场景，包括图像识别、自然语言处理、预测分析等。