AI DevTool

Arize AI

AI applicationsのobservability・evaluation・guardrailsを提供するplatform。OSSのPhoenixとOpenInference、SaaSのArize AXを展開する。

US · 2020 年 · 出典 14

#Developer Tool#Evaluation#AI

AI Infrastructure

LiteLLM

LiteLLMは、複数のLLM providerをOpenAI互換の入力形式で呼び出し、proxy・routing・observabilityを一つのgatewayにまとめるOSS基盤。

United States · 2023 年 · 出典 11

#AI infrastructure#Open Source#Developer Tools

Observability

SigNoz

OpenTelemetryを基盤にlogs・metrics・tracesを統合し、OSSとCloudの両方で提供するobservability platform。

India · 2021 年 · 出典 15

#Open Source#Developer Tools#OpenTelemetry

Observability

Better Stack

Better Stackは、monitoring、logging、incident management、status pageを一つにまとめ、ClickHouseとSQLを軸に開発者向けobservabilityを提供するプラットフォーム。

Czech Republic · 2021 年 · 出典 12

#AI#Bootstrapped#Developer Tools

Observability

Honeycomb

Honeycombは、開発者が本番システムの複雑な挙動を高カーディナリティのイベントデータから調べるobservability platform。OpenTelemetryとquery設計を軸に、未知の問題を探索できる。

United States · 2016 年 · 出典 12

#B2B SaaS#Developer Tools#OpenTelemetry

Developer Tools

Datadog

Datadogは、infrastructure・application・log・securityの監視を一つのobservability platformに統合するdeveloper platform。

United States · 2010 年 · 出典 16

#Monitoring#Developer Tools#observability

Observability

OpenTelemetry

OpenTelemetryはtraces、metrics、logsを収集・転送するvendor-neutralなobservability framework。複数の言語SDKとCollectorを提供し、特定のobservability vendorに依存しない計測データ基盤を目指す。

United States · 2019 年 · 出典 14

#Developer Tool#CNCF#OSS

Developer Tools

Mux

Muxは、動画の配信・再生・品質計測をAPIと開発者向けツールとして提供する動画インフラ企業です。

United States · 2015 年 · 出典 11

#API#Developer Tools#video

Developer Tools

Grafana

メトリクス、ログ、トレースを保存場所に依存せずquery・visualize・alertするopen-source observability platform。Grafana LabsはOSS Grafanaを中心にCloudとEnterpriseを提供する。

Sweden · 2014 年 · 出典 13

#Open Source#Bootstrapped#Developer Tools

Developer Tool

Axiom

Axiomは、ログ・metrics・tracesなどのmachine dataをサンプリングせずに収集・保存・検索する、schema-lessなevent data platform。EventDBとMetricsDB、Consoleを組み合わせ、observabilityの運用コストとデータ欠落を減らす。

United Kingdom · 2019 年 · 出典 16

#Developer Tool#Open Source#observability

Developer Tools

OpenObserve

ログ、メトリクス、トレースを一つにまとめるオープンソースのObservability platform。RustとApache Parquetを軸に、ElasticsearchやDatadogより低コストな運用を狙う。

India · 2022 年 · 出典 12

#Open Source#rust#Bootstrapped

Developer Tools

Sentry

例外をIssueとして集約し、stack trace、release、trace、logs、Session Replayなどの実行文脈をつないで修正までの判断を短縮するapplication monitoring platform。Error Trackingを起点にしつつ、分散トレーシング、performance、profiling、logs、replay、AI observabilityまでをコードレベルで扱う。

United States · 2008 年 · 出典 19

#Open Source#Application Monitoring#Error Tracking

AI DevTool / Observability

Braintrust

LLMアプリケーションとAI agentのtrace、evaluation、prompt/model experiment、quality gateを統合するAI observability platform。

United States · 2023 年 · 出典 16

#Evaluation#AI#llm

AI DevTool / Observability

Langfuse

OSS LLM Observability / engineering platform。YC W23。2026年1月ClickHouse買収、MIT license維持。

DE · 2022 年 · 出典 12

#Open Source#llm#observability