产品库

开发者日志监控与调试的开源平台

Helicone AI是一个为开发者设计的开源平台，专注于日志记录、监控和调试。它具备毫秒级延迟影响、100%日志覆盖率和行业领先的查询时间，是为生产级工作负载设计的。平台通过Cloudflare Workers实现低延迟和高可靠性，并支持风险无忧的实验，无需安装SDK，仅需添加头部信息即可访问所有功能。

开源的RAG应用日志工具

RAG-logger是一个为检索增强生成(Retrieval-Augmented Generation, RAG)应用设计的开源日志工具。它是一个轻量级的、针对RAG特定日志需求的开源替代方案，专注于为RAG应用提供全面的日志记录功能，包括查询跟踪、检索结果记录、LLM交互记录以及逐步性能监控。它采用基于JSON的日志格式，支持每日日志组织、自动文件管理和元数据丰富化。RAG-logger以其开源、轻量级和专注于RAG应用的特性，为开发者提供了一个有效的工具来监控和分析RAG应用的性能。

开源监控工具，提升LLM应用性能。

Langtrace是一个开源的可观测性工具，用于收集和分析追踪和指标，帮助提升大型语言模型（LLM）应用的性能。它支持OpenTelemetry标准追踪，可自我托管，避免供应商锁定。Langtrace提供端到端的可观测性，帮助用户全面了解整个机器学习流程，包括RAG或微调模型。此外，Langtrace还支持建立反馈循环，通过追踪的LLM交互创建黄金数据集，不断测试和增强AI应用。

开源的AI代理/RAG应用的监控与分析工具

Laminar是一个开源的监控和分析工具，专为AI代理和RAG应用设计，提供类似于DataDog和PostHog的功能。它基于OpenTelemetry进行自动监控，支持快速、可靠的数据收集和分析。Laminar使用Rust编写，具有高性能和可靠性，适用于大规模数据处理。它通过提供详细的追踪、事件和分析功能，帮助开发者和企业优化AI应用的性能和用户体验。

自动化监控平台，简化故障排查。

Edge Delta 是一个自动化的监控平台，它使用 AI/ML 技术自动检测异常并发出警报，无需手动设置警报阈值或预测监控条件。该平台提供辅助故障排查功能，通过汇总日志数据，帮助用户快速定位问题和受影响的资源。Edge Delta 还支持 PB 级日志搜索，允许用户存储和搜索所有数据，无需采样或过滤事件以控制成本。此外，Edge Delta 被 Gartner 评为 2023 年监控和可观测性的 Cool Vendor，并且是 SOC 2 Type 2 认证的，可以支持敏感的、关键的任务信息。

AI-powered声音日志

Lid是一个AI-powered声音日志应用，将您的口头日志转化为日常激励音频片段。与传统日志应用不同，Lid通过个性化的声音片段为您提供情绪和经历的反馈，并帮助您形成健康的习惯。Lid还提供安全、私密的空间，让您自由表达内心想法。

基于Linux环境快速部署开源大模型的教程

该项目是一个围绕开源大模型的全流程指导教程,包括环境配置、模型部署、高效微调等,简化开源大模型的使用和应用,让更多普通学习者能够使用开源大模型。项目面向对开源大模型感兴趣且想自主上手的学习者,提供详细的环境配置、模型部署和微调方法。

协作监控LLM

Llog是一个协作监控LLM应用程序的终端到终端平台，为团队提供洞察力，了解他们的LLM应用程序在生产后的情况。团队成员可以在一个协作空间中审查日志、标记重要事项并分配任务。无论团队规模多大，都可以在任何价格层级下享受无限的席位支持。通过直接观察用户交互，全面了解终端用户的行为，并永远不再担心LLM实际上在说什么。使用我们简单的格式，进行几个API请求，即可立即在我们的平台上查看结果。

AI可观测性和机器学习监控平台

Evidently AI是一个开源的Python库，用于监控机器学习模型，支持从RAGs到AI助手的LLM驱动产品的评估。它提供了数据漂移、数据质量和生产ML模型性能的监控，拥有超过2000万的下载量和5000+的GitHub星标，是机器学习领域中一个值得信赖的监控工具。

高效监控和事故管理

Spectate是一个简单但功能强大的监控和事故管理平台，具备AI驱动的状态更新和事故解决方案。快速设置，帮助您轻松高效地进行云监控和事故管理。提供30秒检测，通知速度是传统监控的两倍；支持多种集成，包括Slack、Pushover等；提供自定义状态页面，支持全球性能监控等功能。适用于各种大小的团队和企业。

Quillow - 一个早晨日志的在线杂志。

Quillow是一个早晨日志的在线杂志，它帮助您释放内心的创造力，并通过人工智能提供洞察力。它具有流计时器、划去功能和字数统计等功能，帮助您保持专注、提高创造力。Quillow还可以提供人工智能驱动的洞察力，让您了解统治您潜意识的思想和情绪。

中间件观测平台|云原生监控

Middleware是一个云原生监控平台，提供完整的应用和基础设施可观测性，以便您能够大规模监控和诊断问题。它包括基础设施监控、日志监控、应用性能监控、数据库监控、合成监控、无服务器监控、容器监控和实时用户监控等功能。通过使用Middleware，您可以轻松识别、理解和解决云基础架构中的问题。

在线考试监控系统

AI-Proctor是一款在线考试监控系统，通过插件与桌面应用程序的配合，实现考生浏览器与监考教师的通信和全屏模式切换功能。该系统具备智能监控、全面功能点列表、多种使用场景等特点。

实时监控和管理AI模型与数据

WhyLabs AI Observability Platform是一个实时监控和管理AI模型与数据的平台。它可以帮助用户发现数据和机器学习问题，实现持续改进，避免昂贵的故障。该平台支持监控结构化和非结构化数据，以及所有类型的机器学习模型，包括LLMs。用户可以对数据进行全面的分析，检测数据漂移和数据质量问题，并获得有关训练和部署之间的差异的警报。WhyLabs AI Observability Platform可以快速集成到现有的数据管道和多云架构中，支持从海量数据到实时可行动洞察的转变。定价信息请参考官方网站。

从 Jira 生成出色的发布说明和变更日志

Released 是一个强大的通信工具，能够从 Jira 票据中轻松生成令人惊叹的发布说明。它能够帮助您与客户保持良好的互动，同时确保团队之间的无缝协调。您可以自由定制发布说明的样式，将产品变更无缝集成到您喜欢的发布工具中。同时，Released 还提供了先进的用户管理和高级安全性，完全由 Atlassian 平台支持。

人工智能日志分析和知识管理

logwise是一款AI驱动的日志分析和知识管理工具，可以从各种日志、应用程序和数据源中提取洞察力，为团队提供上下文以快速解决问题。通过logwise，团队可以加快事件响应时间，减少手动日志审查时间，实现自动化异常检测，并提供简化的数据查询和集成。logwise还可以与现有系统集成，如Slack、Jira和PagerDuty，以在需要时提供日志洞察力。

灵活、可扩展、易于使用的云视频监控系统

Eagle Eye Cloud Video Management System (VMS)是一款灵活、可扩展、易于使用的云视频监控系统，适用于各种规模的企业。它提供了全方位的功能和优势，包括实时监控、录像回放、智能分析、远程访问等。该系统的定价和定位根据客户需求而定，更多信息请访问官方网站。

GPT安全认证与监控解决方案

GPT Auth是一个安全的GPT认证和监控平台。它可以让GPT开发者简单快速地为自己的GPT模型添加用户认证系统,实时监控用户查询,从而保护GPT不被非法访问。该平台提供简单易用的无代码解决方案,使所有层次的开发者都能轻松设置强大的安全认证。

全栈监控、调试和测试

Autoblocks是一个协作式的云工作空间，为产品团队快速迭代GenAI产品提供了所需的所有工具。通过Autoblocks，您可以原型和测试应用程序流水线，跟踪用户交互并了解用户体验的影响，评估和可视化用户结果，无缝集成到任何代码库和技术堆栈。

开源的GenAI应用网关，快速构建个性化的AI应用

Arch是一个开源的网关，专为处理提示（prompts）而设计，它利用快速的大型语言模型（LLMs）来处理提示，并与后端系统无缝集成。Arch基于Envoy构建，支持任何应用程序语言，并提供快速部署和透明升级。它提供了包括流量管理、前端/边缘网关、监控和端到端追踪在内的多种功能，帮助开发者构建快速、健壮和个性化的GenAI应用。

监控和调试你的LLM模型

Athina AI是一个用于监控和调试LLM（大型语言模型）模型的工具。它可以帮助你发现和修复LLM模型在生产环境中的幻觉和错误，并提供详细的分析和改进建议。Athina AI支持多种LLM模型，可以配置定制化的评估来满足不同的使用场景。你可以通过Athina AI来检测错误的输出、分析成本和准确性、调试模型输出、探索对话内容以及比较不同模型的性能表现等。

美观高效的更新日志工具

Olvy Changelogs是一个美观高效的更新日志工具，它可以帮助您向用户宣布新功能，提供独立的更新日志页面和应用内小部件。

监控OpenAI API使用情况的工具

LLM Report是一个可以监控OpenAI API使用情况的工具。用户只需输入OpenAI API密钥，工具会直接从OpenAI API中获取数据并创建仪表板，无需安装任何软件。用户可以清楚地了解每个模型、API密钥和用户的费用情况，避免盲目消耗资源。LLM Report得到了全球2500多个用户和公司的认可。

AI驱动的变更日志生成器，简化产品管理流程。

ProductLift是一个针对SaaS产品经理、项目经理和市场策略师的优先级排序、路线图和变更日志工具。它允许用户对功能进行投票，定义产品路线图，并展示产品更新。ProductLift致力于提升您的产品体验。

帮助开发者提升技能水平的日志记录应用。

Jotskey是一个日志记录应用，旨在帮助开发者通过记录日常工作和学习进步，提升他们的工程技能。其主要优点在于结合AI功能，支持开发者进行思维整理、问题解决、成就追踪等，以便更快速地成长和提升。

AI驱动的公司监控服务

RivalSense是一个利用人工智能技术连接80多个数据源，为用户提供深度公司洞察的监控服务。它能够帮助用户关注竞争对手、客户、目标账户、供应商、合作伙伴、投资者以及自己的公司，通过每周的精选更新，帮助用户在商业和职业发展上保持领先。

智能安全监控和预防解决方案

Vigilocity是一种智能安全监控和预防解决方案，帮助企业实时监测并预防网络攻击和数据泄露。其主要功能包括实时警报通知、行为分析、安全事件追踪和风险评估。Vigilocity能够帮助企业提高网络安全性，降低风险，保护品牌和声誉。定价和定位信息请联系官方网站获取。

OpenLIT是用于GenAI和LLM应用可观察性的开源平台。

OpenLIT是一个开源的AI工程平台，专注于生成式AI和大型语言模型（LLM）应用的可观察性。它通过提供代码透明度、隐私保护、性能可视化等功能，帮助开发者简化AI开发流程，提高开发效率和应用性能。作为开源项目，用户可以自由查看代码或自行托管，确保数据安全和隐私。其主要优点包括易于集成、支持OpenTelemetry原生集成、提供细粒度的使用洞察等。OpenLIT面向AI开发者、数据科学家和企业，旨在帮助他们更好地构建、优化和管理AI应用。目前未明确具体价格，但从开源特性来看，可能对基础功能提供免费使用。

观测、分析和评估AI代理的可观测性和日志平台

LLMonitor是一个为LLM（语言模型）应用提供观测性、分析和测试的平台。它可以记录LLM的调用日志、指标和追踪，支持对话评估和聊天记录回放，帮助优化AI应用的性能和成本控制。LLMonitor提供了日志监控、性能分析、错误追踪、用户对话记录、用户反馈收集等功能。它适用于各种AI开发场景，包括代理人、聊天机器人等。

AI驱动的网站监控与竞争对手分析工具。

Let Me Know When 是一个AI驱动的网站监控平台，能够自动跟踪网站变化、价格变动、竞争对手更新等信息，为个人和企业提供实时的在线监控服务。它通过AI技术提供智能化的洞察，帮助用户及时把握市场动态和竞争对手的行动。