Skip to main content
PromptQuorum
ホーム/ローカルLLM/2026年 最適なLLMオブザーバビリティツール:Langfuse・LangSmith・Helicone
Tools & Interfaces

2026年 最適なLLMオブザーバビリティツール:Langfuse・LangSmith・Helicone

·14分で読めます·Hans Kuepper 著 · PromptQuorumの創設者、マルチモデルAIディスパッチツール · PromptQuorum

このページには参考用の第三者製品へのリンクが含まれています。PromptQuorumはいかなるアフィリエイトプログラムにも参加しておらず、これらはコミッションを得ない単なる参照リンクです。リンクのクリックと次のステップはご自身の責任です。これらのリンクはPromptQuorumによる推奨や検証を表すものではありません。

本番運用の多くのチームにとって総合的な最良解はLangfuseです。GitHubスター33,900件、自己ホストが無料で、4製品のなかで最も広いフレームワーク対応を備えます。スタックがLangChainまたはLangGraphならLangSmithが正解で、1席あたり月39ドルに計測されたコンピュートユニットとストレージユニットが加わります。HeliconeはSDKではなくプロキシであるため導入が最速で、月79ドルです。多くの比較記事が見落としている点が2つあります。Langfuseは2026年1月16日にClickHouseに買収されており、無料の自己ホスト版は完全版ではありません。RBACや監査ログを含む9つの機能がEnterprise専用です。

重要なポイント

  • Langfuse — GitHubスター33,900件で、ここで最大のオープンソース基盤です。クラウドのHobbyは無料で月5万ユニット、データ参照30日間、2ユーザー。Coreは月29ドルで10万ユニットとユーザー数無制限、Proは月199ドルで3年間の保持、Enterpriseは月2,499ドルです。オープンソースのコアを自己ホストする分には無料かつ無制限です。
  • 訂正しておきたい点: Langfuseは「機能制限のないMITライセンス」と広く説明されますが、公式READMEは「This repository is MIT licensed, except for the `ee` folders」と述べ、自己ホストの料金ページはサーバー側のデータマスキング、プロジェクト単位のRBAC、保持期間の管理、SCIM、監査ログなど9つの機能をEnterprise限定として挙げています。基本のオブザーバビリティと評価は本当に無料ですが、ガバナンス機能は無料ではありません。
  • Langfuseは2026年1月16日にClickHouse, Inc.に買収されました。 ClickHouseの4億ドルのシリーズDと同時に発表されたものです。リポジトリのLICENSEファイルは現在「Copyright (c) 2023-2026 ClickHouse, Inc.」で始まります。Langfuseを避ける理由にはなりませんが、標準として採用する前に5分だけ確認する価値のあるロードマップ上の論点です。
  • LangSmith — Developerは無料で、月5,000件までの基本トレースと1席が付きます。Plusは1席あたり月39ドルで基本トレース1万件までが含まれ、それを超えると従量課金となり、コンピュートユニット1.50ドル、ストレージユニット1.00ドルです。Enterpriseは個別見積もりで、自己ホストとハイブリッドの選択肢があります。
  • Helicone — SDKではなくプロキシなので、導入は1行で済み、計装なしにすべての呼び出しを取得します。Hobbyは無料で1万リクエスト、1GB、保持7日間。Proは月79ドルで席数無制限、保持1か月。Teamは月799ドルでSOC-2とHIPAAに対応し、保持3か月です。
  • Heliconeもオープンソースです。 Apache-2.0でスター6,100件ですが、これは多くの比較記事が見落としています。ただし料金ページはオンプレミスをEnterpriseでのみ販売しており、サポートされた無料の自己ホスト経路は示されていません。ソースが公開されていることと、ベンダーが自前運用を支援することは別です。
  • PromptLayer — 4つのなかで最も対象範囲が狭い製品です。無料枠は月2,500リクエスト、5ユーザー、10プロンプト。Proは月49ドルで超過分は1トランザクション0.003ドル。Teamは月500ドルで10万リクエスト超、25ユーザーです。GCP・AWS・Azureでの自己ホストはEnterprise限定です。
  • 4社ともアフィリエイトや紹介プログラムを公開していません。LangChainはPartner Networkを運営していますが、これは技術連携のプログラムであり報酬制度ではありません。本ページのリンクはすべて報酬を伴いません。

🏆 あなたに最適な選択

構造上の問いは、自分のコードを計装するのか、手前にプロキシを置くのかであり、それが何を見られるかを決めます。 上から読み、自分に当てはまる最初の行で止めてください。

  • 柔軟性と、あとから自己ホストする選択肢がほしい → Langfuse。連携が最も広く、自己ホストのコアが無料で、乗り換えコストも最小です。ただしガバナンス機能を前提にする前にEnterpriseの一覧を読んでください。
  • スタックがLangChainまたはLangGraph → LangSmith。そこではトレーシングがネイティブかつ設定不要で、このエコシステムで並ぶものはありません。
  • SDKの書き換えなしで今日オブザーバビリティがほしい → Helicone。プロキシなのでコードは1行で、既定ですべてのリクエストにコストデータが付きます。
  • 多数のキーとモデルにまたがるコストの膨張が本当の課題 → Helicone。リクエスト単位のコスト内訳が中核の製品であり、トレーシングに後付けしたレポート画面ではありません。
  • 必要なのはプロンプトのバージョン管理とリクエストログだけ → PromptLayer。月2,500リクエストまで無料で、他の3つより狭い範囲であることを率直に示しています。
  • 本番前で、1日数十回の呼び出し → どれも不要です。各社の管理画面とログで足り、実トラフィックが来れば結局は設定し直すことになります。
Langfuse — 料金を見る製品リンク · 開示済みHelicone — 料金を見る製品リンク · 開示済み

LLMオブザーバビリティとは何か

LLMオブザーバビリティは、モデル呼び出しのトレース(プロンプト、応答、レイテンシ、トークン使用量、コスト)を取得して保存し、障害のデバッグ、品質劣化の検知、本番での支出の把握を可能にするものです。 通常のアプリケーションのオブザーバビリティを、同じ入力が異なる出力を生む非決定的な挙動へ拡張したものであり、ここでの「壊れた」は多くの場合「例外が投げられた」ではなく「出力の質が落ちた」を意味します。

これは評価とは別の仕事です。オブザーバビリティはリリース後にシステムが何をしているかを見張り、評価は変更を出してよいかを事前に教えます。両方を行うチームは多く、これらのツールのいくつかは両方に対応しますが、問いが違います。リリース前の半分については最適なLLM評価ツールをご覧ください。

📍 一文で説明

LLMオブザーバビリティとは、モデル呼び出しのトレース(プロンプト、応答、レイテンシ、トークン使用量、コスト)を取得し、チームが障害をデバッグし、品質劣化を検知し、本番での支出を監視できるようにする実践です。

💬 簡潔に説明

毎回違う答えを返すものに対するログ取りです。呼び出しがあった事実だけでなく、何を入れ、何が出て、いくらかかり、どれだけ時間を要したかを残すため、品質が動いた理由をあとから追えます。

Langfuse・LangSmith・Helicone・PromptLayerの比較

4製品は機能を正面から競うのではなく、スタックのそれぞれ異なる地点を最適化しています。 料金は2026年8月28日に各社の料金ページで確認し、リポジトリの数値は同日にGitHub APIから取得しました。

項目LangfuseLangSmithHeliconePromptLayer
方式SDKトレーサーSDKトレーサープロキシSDKとRESTのログ
GitHubスター33,900件オープンソースではない6,100件800件(クライアント)
ライセンスee/を除きMIT商用Apache-2.0商用
無料枠月5万ユニット、30日月5,000トレース、1席1万リクエスト、7日2,500リクエスト、10プロンプト
有料の入口Core月29ドルPlus1席月39ドル+従量Pro月79ドルPro月49ドル
無料の自己ホスト可、コア機能不可、Enterpriseのみ公開だが販売なし不可、Enterpriseのみ
準拠の段階Pro:SOC2・ISO27001・BAAEnterpriseTeam799ドル:SOC-2・HIPAAEnterprise
アフィリエイト見当たらず見当たらず見当たらず見当たらず

⚠️Warning: 比較記事はしばしばLangfuseを「ここで唯一のオープンソース」と呼びますが、HeliconeもApache-2.0でスター6,100件なので正確ではありません。正確に言えば、Langfuseは無料の自己ホスト構成を文書化して支援しているのに対し、HeliconeはオンプレミスをEnterprise段階でのみ販売し、料金ページにサポートされた無料の自己ホスト経路を記載していない、という違いです。

Langfuse:柔軟な選択肢

Langfuseが既定の推奨になるのは、連携リストが最も長く、自己ホストのコアが本当に無料で、考えが変わったときの乗り換えコストが最も低いからです。 同時に注意点も最も多く、決める前に把握しておくべきです。

1

Langfuse — 総合的に最良

スター33,900件、自己ホストのコアが無料、フレームワーク対応が最も広い

Langfuseはオブザーバビリティ、評価、プロンプト管理、データセットを1つの製品で扱い、連携リストは4製品で最長です。OpenAI SDK、LangChain、LlamaIndex、Haystack、LiteLLM、Vercel AI SDK、Ollama、Amazon Bedrockにネイティブ対応し、さらにコミュニティ製の連携があります。LangChainを少し使い、素のSDK呼び出しもあり、検索にLlamaIndexを使うといった混在スタックでは、この幅広さのおかげでフレームワークごとではなく一度の計装で済みます。クラウドの料金は、Hobbyが無料で月5万ユニットとデータ参照30日間、Coreが月29ドルで10万ユニットとユーザー数無制限、Proが月199ドルで3年間の保持に加えSOC2・ISO27001とHIPAA向けのBAA、Enterpriseが月2,499ドルです。超過分は段階制で、10万ユニットあたり8ドルから、量が増えると6ドルまで下がります。オープンソースのコアの自己ホストは無料で、使用量も実際に無制限です。

長所

  • +4製品で最も広いネイティブ連携。混在スタックでも計装は一度で済む
  • +使用量無制限の無料自己ホストコア。Docker Compose、Kubernetes、クラウドのテンプレートで構築できる
  • +評価、データセット、プロンプト管理が別売りではなく同梱
  • +コアが公開されており自分の構成ごと移せるため、ここで最も乗り換えコストが低い

短所

  • RBAC、監査ログ、データマスキングを含む9機能がEnterprise専用(自己ホストの章を参照)
  • 自己ホストはPostgresに加え自己管理のClickHouseを運用することを意味し、相応の工数がかかる
  • ClickHouse傘下となり、オープンソースへの公的な表明はあるものの、ロードマップ上の論点は残る
Langfuse — 料金を見る製品リンク · 開示済み

LangSmith:LangChain向けの選択肢

アプリケーションがLangChainやLangGraphの上に構築されているなら、LangSmithは設定なしでトレースします。この点で並ぶものはありません。 そのエコシステムの外では、利点はかなり弱まります。

1

LangSmith — LangChainとLangGraphのチームに最良

設定不要のネイティブトレーシング、1席あたり月39ドルと従量ユニット

LangSmithはLangChainチームによる製品で、LangChainやLangGraphの内側ではトレーシングが自動で働きます。計装を書かずに、エージェント実行のステップ単位の可視性が得られます。その外では、OpenAIやAnthropicのSDK呼び出しを`traceable()`でラップする形になり、動きはしますが主要な利点は失われます。料金は、Developerが1席0ドルで月5,000件までの基本トレースと1席のみ、Plusが1席あたり月39ドルで基本トレース1万件までと小規模なサーバーレス構成を1つ無料で含み、Enterpriseは個別見積もりで自己ホストとハイブリッドの選択肢があります。上限を超えると従量課金となり、LangChainコンピュートユニット1.50ドル、ストレージユニット1.00ドルです。決める前に見積もるべきはここで、請求額は人数ではなくエージェントの複雑さとトレース量に比例して伸びます。

長所

  • +LangChainとLangGraphの内側では設定不要でトレースでき、このスタックでは無敵
  • +データセット駆動の評価と実験の機能が成熟している
  • +無料のDeveloper枠は1人で試作する範囲なら十分
  • +Enterpriseでは自己ホストとハイブリッドの構成が選べる

短所

  • コンピュートとストレージのユニット課金のため、エージェントが複雑になるほど請求額が読みにくい
  • 自己ホストはEnterprise限定で個別見積もり
  • LangChainを使っていない場合、価値の提案はかなり弱い
LangSmith — 料金を見る製品リンク · 開示済み

Helicone:プロキシという選択肢

Heliconeは他の3つと構造が異なり、SDKとしてコードの中に入るのではなく、API呼び出しの手前にプロキシとして立ちます。 この一点が、最大の利点と主要な限界の両方を説明します。

1

Helicone — 導入が最速、コスト把握に最良

1行で入るプロキシ、Apache-2.0、1万リクエストまで無料、以降は月79ドル

Heliconeはプロキシなので、導入は計装プロジェクトではなくベースURLの変更で済み、何をトレースするか誰かが決めるまでもなく、既定ですべての呼び出しでコストとリクエストのデータを取得します。そのため4製品で最も早く価値が出ますし、コスト把握が最大の強みである理由もここにあります。リクエスト単位のコスト内訳と、多数のキーやモデルにまたがる支出の可視化が中核の製品であり、トレーシングの上に載せたレポート画面ではありません。Hobbyは無料で1万リクエスト、ストレージ1GB、保持7日間。Proは月79ドルで席数無制限、保持1か月。Teamは月799ドルでSOC-2とHIPAAへの準拠と保持3か月が加わります。Enterpriseではオンプレミス構成、SAML SSO、無制限の保持が付きます。コードはApache-2.0でスター6,100件ですが、料金ページ上はオンプレミスをEnterpriseでのみ扱っています。

長所

  • +導入は1行。SDKの書き換えが不要で、OpenAI互換のエンドポイントなら何にでも使える
  • +コスト把握が中核の製品であり、二次的なレポートのタブではない
  • +Apache-2.0ライセンス。この分野の比較記事の多くが見落としている点
  • +月79ドルのPro以上で席数が無制限

短所

  • プロキシはリクエストと応答を見るが、マルチエージェント実行の内部ステップは見えない
  • 無料枠のデータ保持は7日間で、ここでは最短
  • ソースは公開されているのに、オンプレミスはEnterpriseでの販売
Helicone — 料金を見る製品リンク · 開示済み

PromptLayer:軽量な選択肢

PromptLayerは他の3つより範囲が狭く、それは欠点ではなく意図です。 プロンプトのバージョン管理とリクエストのログを担い、完全なオブザーバビリティ基盤を名乗ってはいません。

1

PromptLayer — プロンプトのバージョン管理だけが必要なときに最良

月2,500リクエストまで無料、Proは月49ドル

PromptLayerは、プロンプトのバージョン付き履歴と、それを使ったリクエストのログを併せて残すことに集中しています。これは完全なオブザーバビリティより早い段階で生じる実際の需要です。無料枠は月2,500リクエスト、5ユーザー、10プロンプト。Proは月49ドルで5ユーザー、超過分は1トランザクション0.003ドル。Teamは月500ドルで10万リクエスト超、25ユーザー、超過分は0.002ドルと安くなります。GCP・AWS・Azureでの自己ホストは個別見積もりのEnterpriseのみです。4製品で唯一、目立ったオープンソースの実体がありません。公開リポジトリはスター800件のクライアントライブラリであって、基盤そのものではないためです。ログも取るプロンプト管理ツールと捉えるべきで、プロンプトも扱うオブザーバビリティ基盤ではありません。

長所

  • +4製品のなかで理解も導入も最も簡単
  • +プロンプトのバージョン管理が主役であり、大きな製品の付随機能ではない
  • +無料枠は本当に小さな負荷なら実用になる
  • +Teamでは超過分が1トランザクション0.002ドルと安い

短所

  • オープンソースの基盤がない。公開リポジトリはクライアントライブラリのみ
  • 自己ホストはEnterprise限定
  • 連携リストが最も短く、評価やデータセットの機能もLangfuseやLangSmithより軽い
PromptLayer — 料金を見る製品リンク · 開示済み

ClickHouseによる買収がLangfuseにとって意味すること

ClickHouse, Inc.は2026年1月16日にLangfuseを買収しました。Dragoneerが主導した4億ドルのシリーズDと同時に発表されたものです。 買収は当時SiliconANGLEが報じ、ClickHouseの公式ブログ、LangfuseのGitHubディスカッション、案件を担当した法律事務所によって確認できます。

最も明確な裏付けはリポジトリ自体にあります。LICENSEファイルは現在「Copyright (c) 2023-2026 ClickHouse, Inc.」で始まります。プロジェクトは活発に開発が続いており、本ページの確認日にも更新がありました。

この組み合わせには筋が通っています。Langfuseはもともとトレースの保存先にClickHouseを使っており、買い手は製品の土台となるデータベースの持ち主であって、無関係な買収者ではありません。この分野の買収としては良い出発点です。それでも論点は挙げておく価値があります。買収後のロードマップの優先順位は買い手の商業的関心に従いますし、自己ホストのLangfuseは、ClickHouse Cloudも販売する企業に依存することになりました。Enterpriseの自己ホスト構成はClickHouse CloudまたはBYOCと明示的に結び付いており、その費用は上乗せになります。

📌Note: これはLangfuseを避ける理由ではありません。オープンソースのコアはMITで、活発に保守されており、自分で動かせます。ただし本番スタックの標準に据える前に買収の告知を読む理由にはなりますし、有料の自己ホスト経路がClickHouseの商用プランを通ることは知っておくべきです。

自己ホストとEnterpriseの壁

Langfuseは4製品で唯一、無料の自己ホスト構成を文書化して支援していますが、「無料版と有料版のあいだに機能の壁はない」という繰り返し語られる主張は誤りです。 公式の自己ホストページは、サーバー側のデータマスキング、プロジェクト単位のRBAC、データ保持期間の管理、SCIMによるユーザープロビジョニング、組織作成者、UIのカスタマイズ、監査ログ、管理およびインスタンス管理API、保護されたデプロイラベルという9つの機能をEnterprise限定として挙げています。

この一覧は、自己ホストが誰のためのものかを踏まえて読んでください。チームが自己ホストを選ぶのはデータ所在地や規制上の要請が理由であり、RBAC、監査ログ、データマスキングはまさに規制下のチームが必要とするものです。無料枠はオブザーバビリティ、評価、プロンプト管理、データセット、トレーシング、コスト把握を使用量無制限で確かに含みます。含まないのはガバナンスです。

他の3つはより単純です。LangSmithは自己ホストをEnterpriseの個別見積もりに限定しています。PromptLayerはGCP・AWS・Azure上のシングルテナント自己ホストをEnterpriseでのみ提供します。興味深いのはHeliconeで、コードはApache-2.0で公開されている一方、料金ページはオンプレミスをEnterpriseでのみ販売し、サポートされた無料の自己ホスト経路を記載していません。ここではオープンソースであることと、支援された自己ホストがあることは同義ではありません。

⚠️Warning: コンプライアンス要件を満たすためにLangfuseを自己ホストするのであれば、構築前にEnterpriseの一覧を確認してください。監査ログとプロジェクト単位のRBACは、自己ホストに最も関心を持つ規制下のチームにとって譲れないことが多く、どちらも壁の向こう側にあります。

料金の比較

4製品とも、席数またはプラットフォームの基本料に、含有枠を超えた計測分を足すハイブリッド課金です。そのため同じプランでもチームによって請求額は大きく変わります。 人数より使用量が効き、LangSmithが最も分かりやすい例です。

段階LangfuseLangSmithHeliconePromptLayer
無料Hobby:5万ユニット、2ユーザーDeveloper:5,000トレース、1席Hobby:1万リクエストFree:2,500リクエスト、5ユーザー
無料枠の保持データ参照30日間料金ページに記載なし7日間料金ページに記載なし
有料の入口Core月29ドルPlus1席月39ドルPro月79ドルPro月49ドル
従量課金10万ユニット8ドル、段階制コンピュート1.50ドル・ストレージ1.00ドル無料枠超過分は従量1トランザクション0.003ドル
中間の段階Pro月199ドル、保持3年Enterpriseは個別Team月799ドルTeam月500ドル
準拠Pro:SOC2・ISO27001・BAAEnterpriseTeam:SOC-2・HIPAAEnterprise
自己ホスト費用コア機能は無料EnterpriseのみEnterpriseのみEnterpriseのみ

月あたりおよそ5万〜10万イベント未満の小さなチームなら、Langfuseの自己ホストかHobbyで0ドル、Langfuse CoreかHelicone Proで29〜79ドルが現実的な水準です。通常はより大きくなるモデルのトークン費用とは分けて見積もってください。

💡Tip: 無料枠の大きさだけでなく保持期間を比べてください。Heliconeの無料データは7日間、LangfuseのHobbyはデータ参照が30日間です。リクエスト量が寛大に見えるツールでも、先月の事象を調べたくなった瞬間に上位プランが必要になります。

コスト管理に向くのはどれか

Heliconeはコストの可視化を軸に作られており、その理由はプロキシという構造にあります。 すべての呼び出しが通過するため、何を計装するか誰かが決めるまでもなく、既定で全リクエストのコストとトークンのデータが取得されます。誰かがラップし忘れたサービスによる死角が生じません。

LangfuseとLangSmithも、より広いオブザーバビリティのデータの一部としてトレース単位のトークン使用量とコストを記録しており、多くのチームにはこれで十分です。ただしどちらも、Heliconeのようにコスト管理を独立した製品面として前に出してはいません。PromptLayerはリクエスト単位のコストを記録しますが、専用のコスト画面ではなくログの表示を通じて示します。

率直に言えば、これは能力の差ではなく重点の差です。「12のサービスのうち、どのモデルとどのキーが予算を食っているのか」に答えたいならHeliconeが最も速く答えます。「このエージェント実行がなぜ11ドルかかったのか」に答えたいなら、個々のステップが見えるSDKトレーサーのほうが役立ちます。

誰がどれを使うべきか

スタック、データ所在地の要件、チーム規模で決まります。 6つの類型でほとんどの読者を網羅できます。

  • LangChainで試作している個人開発者 → LangSmith Developer。月5,000件の無料トレースで足り、トレーシングに設定も要りません。
  • データ所在地を自分で管理したい小規模チーム → 自己ホストのLangfuse。RBACや監査ログが必要なら、先にEnterpriseの一覧を確認してください。
  • 1日1万回超の呼び出しがあり、LangChainではないチーム → Langfuse CloudかHelicone。LangSmithの利点は効きませんが、従量課金は効いてしまいます。
  • APIコストの膨張が痛みになっているチーム → 月79ドルのHelicone Pro。コスト把握そのものが製品です。
  • SOC-2やHIPAAが必要な規制業種 → 月799ドルのHelicone Team、またはSOC2・ISO27001・BAAを含む月199ドルのLangfuse Pro。
  • プロンプトのバージョン管理だけが必要なチーム → PromptLayerの無料枠かPro。回帰テストが必要になった時点で見直してください。

EU・日本・中国におけるオブザーバビリティ

オブザーバビリティのトレースには、プロンプトと応答が丸ごと入ります。つまり利用者が入力した内容がそのまま含まれます。そのため、ホスト型か自己ホストかという選択は、主要な3つの市場でデータ保護の問題になります。

オブザーバビリティツール選びでよくある誤解

  1. 1
    自己ホストのLangfuseには機能の壁がないと考える
    Why it matters: 公式の自己ホストページは、プロジェクト単位のRBAC、監査ログ、サーバー側のデータマスキングを含む9機能をEnterprise限定として挙げています。まさにコンプライアンスのために自己ホストするチームがそれらを必要とすることが多く、構築が済んでから不足に気づきます。
  2. 2
    Langfuseを唯一のオープンソースだと述べる
    Why it matters: HeliconeはApache-2.0でスター6,100件です。正確な区別は、Langfuseが支援された無料の自己ホスト構成を文書化しているのに対し、HeliconeはオンプレミスをEnterprise段階で販売しているという点であって、一方が公開でもう一方が非公開という話ではありません。
  3. 3
    LangSmithの1席39ドルを請求額のすべてだと読む
    Why it matters: Plusでは席料に加えて、コンピュートユニット1.50ドルとストレージユニット1.00ドルの従量課金が乗ります。請求額は人数よりもエージェントの複雑さとトレース量に比例して伸びるため、LangGraphを多用するチームは人を増やさなくても費用が跳ね上がることがあります。
  4. 4
    HeliconeのプロキシをSDKトレーシングと同等に扱う
    Why it matters: プロキシはリクエストと応答を取得しますが、マルチエージェント実行の内部ステップは取得しません。エージェントがなぜその経路を選んだのかを見る必要があるなら、両方を1つに求めず、フレームワークのネイティブなトレーサーと併用してください。
  5. 5
    保持期間を見ずに無料枠を比べる
    Why it matters: Heliconeの無料枠はデータ保持が7日間、LangfuseのHobbyはデータ参照が30日間です。リクエストの上限が寛大でも期間が短ければ、先月の品質劣化を調べた最初の瞬間に上位プランが必要になります。

導入を見送るべき場合

まだ試作段階なら——1日に手動で数十回呼ぶだけ、本番トラフィックはなく、トレースを見る必要のある人もほかにいないなら——4つとも見送り、各社の管理画面を使ってください。 OpenAIの使用状況ページやAnthropicのコンソールが支出とリクエスト量をすでに示しており、この規模なら残りは出力を表示するだけで足ります。

待つ価値のある閾値ははっきりしています。自分が起こしたのではないトラフィックを生む実利用者が現れたとき、あるいは「何をしたのか」をあなたに聞かずに答える必要のある二人目が現れたときです。どちらも可視性の問題であり、これらのツールが売っているものです。それ以前に導入するのは、まだ見えていない利用の型に対して基盤を設定することであり、実トラフィックが来ればどのみち設定し直すことになります。

💡Tip: 有用な引き金があります。「なぜあの応答がおかしかったのか」に記憶やログから答えられなくなった最初の瞬間に導入してください。その問いこそが製品であり、トラフィックが実在して初めて生じます。

よくある質問

LLMオブザーバビリティとは何ですか?

モデル呼び出しのトレース(プロンプト、応答、レイテンシ、トークン使用量、コスト)を取得して分析し、チームが障害をデバッグし、品質劣化を検知し、本番での支出を監視できるようにする実践です。通常のアプリケーションのオブザーバビリティを、同じ入力が異なる出力を生む非決定的な挙動へ拡張したもので、ここでの障害はエラーというより品質の劣化を指すことが多くなります。

Langfuseの自己ホストは本当に無料ですか?

中核の製品については無料ですが、重要な但し書きがあります。自己ホストのコアはMITライセンスで使用量は無制限、オブザーバビリティ、評価、プロンプト管理、データセット、コスト把握を含みます。ただし公式の自己ホストページは、プロジェクト単位のRBAC、監査ログ、サーバー側のデータマスキング、保持期間の管理、SCIMなど9つの機能をEnterprise限定として挙げています。中核の機能は無料ですが、ガバナンス機能は無料ではありません。

LangfuseはClickHouseに買収されましたか?

はい。2026年1月16日で、Dragoneerが主導したClickHouseの4億ドルのシリーズDと同時に発表されました。リポジトリのLICENSEファイルには現在ClickHouse, Inc.の著作権表示が入っています。プロジェクトは活発に開発が続いており、コアはMITライセンスのままです。Langfuseがもともとトレースの保存にClickHouseを使っていたことを考えると、この組み合わせには筋が通っています。

LangSmithの費用はいくらですか?

Developerは無料で、月5,000件までの基本トレースと1席が付きます。Plusは1席あたり月39ドルで基本トレース1万件までと小規模なサーバーレス構成を1つ無料で含みます。それを超えると従量課金で、LangChainコンピュートユニット1.50ドル、ストレージユニット1.00ドルです。Enterpriseは個別見積もりで、自己ホストとハイブリッドの選択肢があります。

すでにLangChainを使っている場合、LangSmithとLangfuseのどちらですか?

LangChainとLangGraphの内側で設定不要の最も滑らかな体験がほしく、マネージドのホスティングで構わないならLangSmithです。今はLangChainでも、あとから自己ホストする選択肢を残したい場合、あるいはLlamaIndexやHaystack、素のSDK呼び出しも併用している場合はLangfuseです。LangfuseのLangChain連携は間に合わせではなく、第一級のSDKです。

Heliconeはオープンソースですか?

はい。Apache-2.0でGitHubスターは約6,100件ですが、この分野の比較記事の多くが見落としています。ただしHeliconeの料金ページはオンプレミス構成をEnterprise段階でのみ販売しており、サポートされた無料の自己ホスト経路は記載されていません。ソースが公開されていることと、ベンダーが自前運用を支援することは別です。

これらにアフィリエイトプログラムはありますか?

4社のサイトのいずれにも、公開されたアフィリエイトや紹介のプログラムは見当たりませんでした。LangChainはPartner Networkを運営していますが、これは報酬制度ではなく技術・連携パートナーの枠組みで、別途「LangSmith for Startups」というクレジットの制度があります。PromptQuorumは本ページのどのリンクからも収益を得ていません。

オブザーバビリティと評価の違いは何ですか?

オブザーバビリティはリリース後の実トラフィックを見張り、システムが今何をしているかを教えます。評価は出荷前に固定のデータセットを流し、変更が品質を上げたか下げたかを教えます。これらのツールのいくつかは両方に対応しますが、問いが違います。リリース前の半分については最適なLLM評価ツールをご覧ください。

結論

  • Langfuseを選ぶなら 連携が最も広く、自己ホストの選択肢もほしい場合。次の一歩:無料のHobby枠かDocker Composeでの構築から始め、RBACや監査ログが要るならEnterpriseの一覧を確認してください。
  • LangSmithを選ぶなら スタックがLangChainまたはLangGraphの場合。次の一歩:無料のDeveloper枠から始め、席単価が請求額のすべてではないため、Plusへ移る前にコンピュートとストレージのユニット消費を試算してください。
  • Heliconeを選ぶなら コストの可視化が痛みで、今日動かしたい場合。次の一歩:無料枠でサービスを1つプロキシ経由にし、コストのデータが事業者の請求と合うか確かめてください。
  • PromptLayerを選ぶなら プロンプトのバージョン管理こそが要件の場合。次の一歩:無料枠で使い、データセット駆動の回帰テストが必要になったらLangfuseかLangSmithへ移ってください。
  • 4つとも見送るなら 本番前の段階の場合。次の一歩:各社の管理画面を使い、あなた以外の誰かがシステムの挙動を見る必要が出た時点で見直してください。

出典

サードパーティの情報に関する注意

この記事はサードパーティのAIモデル、ベンチマーク、価格、ライセンスを参照しています。AIの状況は急速に変化しています。ベンチマークスコア、ライセンス条件、モデル名、API価格は執筆時とお読みになる時の間で変わる可能性があります。この記事に基づいてデプロイやコンプライアンスに関する決定を下す前に、各プロバイダーの公式ソース(ライセンスとベンチマークはHugging Faceのモデルカード、API価格はプロバイダーのウェブサイト、現在のGDPRとEU AI法のテキストはEUR-Lex)で最新の数値を確認してください。

ローカルLLM、独自のAPIキー、またはその両方でPromptQuorumを使用できます — バックエンドはあなたが選択します。

PromptQuorumベータ版をダウンロード →

← ローカルLLMに戻る