「Composo:エンタープライズのAIアプリのパフォーマンスの監視」

htmlAIと大規模言語モデル(LLM)は非常に有望ですが、正直言って、成功したり失敗したりします。すべての問題を解決する時期は誰も確信していませんが、スタートアップが企業を支援して、LLM搭載アプリが期待通りに機能するように取り組んでいるのは驚くことではありません。
ロンドンを拠点とするスタートアップ、Composoが登場し、この問題を解決する優位性があると考えています。彼らは、企業がLLMアプリの正確性と基準を満たしているかを確認できるカスタムモデルを提供しています。
Composoはこの分野で唯一ではありません。Agenta、Freeplay、Humanloop、LangSmithといった競合も、人間やチェックリスト、従来のツールに頼らず、LLMベースのより良いアプリテスト方法を提供しようとしています。しかし、ComposoはノーコードオプションとAPIの両方を提供することで異なると主張しています。これにより、開発者だけでなく、ドメイン専門家や経営陣も inconsistency、品質、正確性を自分で確認できます。
その仕組みは次のとおりです:Composoは、AIアプリに求められる結果に基づいてトレーニングされた報酬モデルと、アプリ固有の基準を組み合わせます。そして、アプリの出力がその基準にどの程度一致するかをスコアリングします。例えば、医療トリアージチャットボットがある場合、危険信号の症状を監視するカスタムガイドラインを設定でき、Composoはアプリがそのルールをどれだけ守っているかを教えてくれます。
彼らは最近、Composo Alignの公開APIをリリースしました。これは、設定した任意の基準に基づいてLLMアプリを評価するものです。
その成果を上げているようです。Accenture、Palantir、McKinseyといった大企業が顧客リストに名を連ね、最近200万ドルのプレシード資金を獲得しました。AIの世界では資金が豊富に流れている中でこれは少なく思えるかもしれませんが、Composoの共同創業者兼CEO、Sebastian Foxは、巨額の資金は必要ないと言います。「少なくとも今後3年間は、何億ドルも調達する予定はありません。基盤モデルを構築している人々がいて、彼らが非常に効果的にやっているからです。それが私たちのUSPではありません」と、元McKinseyコンサルタントのFoxは述べました。「代わりに、毎朝起きて、OpenAIがモデルで大きな進歩を遂げたというニュースを見ると、それは私のビジネスにとって良いことです。」
新しい資金で、Composoはエンジニアリングチーム(共同創業者兼CTOで、元Graphcoreの機械学習エンジニアであるLuke Markhamが率いる)を強化し、さらに顧客を獲得し、R&Dを加速する計画です。「今年の焦点は、現在の技術をこれらの企業にスケールすることにあります」とFoxは言いました。
シードラウンドは、英国のAIプレシードファンドTwin Path Venturesが主導し、JVH VenturesとEWORも参加しました。EWORはすでにアクセラレータープログラムを通じてComposoを支援していました。「Composoは、企業AIの導入における重要なボトルネックに対処しています」とTwin Pathのスポークスパーソンは述べました。
このボトルネックは、Foxによると、AIシーン全体、特にビジネスにとって大きな問題です。「人々は興奮の誇大広告を超えて、今、『これが現在の形で私のビジネスに本当に変化をもたらすのか?信頼性が十分でないし、一貫性もない。たとえそうであっても、それがどの程度なのか証明できない』と考えています」と彼は説明しました。
これは、AIを使いたいがリスクを心配する企業にとって、Composoを非常に価値あるものにする可能性があります。そのため、彼らは業界に依存しないが、コンプライアンス、法律、医療、セキュリティに重点を置いています。
差別化要因について、Foxは彼らの成果を再現するのは簡単ではないと言います。「モデルのアーキテクチャと、トレーニングに使用したデータがあります」と彼は述べ、Composo Alignが「専門家の評価の大きなデータセット」でトレーニングされたと付け加えました。
確かに、テック大手が力を入れてこの問題を解決しようとするかもしれませんが、Composoは先行していると考えています。「もう一つは、時間とともに蓄積するデータです」とFoxは、評価の好みを構築する方法について語りました。
柔軟な基準セットでアプリを評価できるため、Composoは、より硬直したアプローチの競合よりも、エージェント型AIの台頭に適していると考えています。「私の意見では、エージェントがうまく機能する段階にはまだ達していません。それを解決しようとしているのです」とFoxは言いました。
*TechCrunchにはAIに焦点を当てたニュースレターがあります!毎週水曜日に受信箱で受け取るには、ここでサインアップしてください。*
関連記事
AIモデルルーティングが勢いを増す中、StripeがOpenRouterを買収へ
Stripeは、開発者が単一のインターフェースを通じて数百のモデルにアクセスできるAIモデルルーティングプラットフォーム「OpenRouter」の買収に合意した。この買収により、StripeのAI活用やトークンベースの課金に関する既存の取り組みに、モデルの選択およびルーティング機能が追加されることになる。Stripeによると、OpenRouterは80社以上のプロバイダーが提供する400以上のモデ
GoogleのAI概要記事が検索結果で存在感を増している
Similarwebの「2026年生成AIの現状」レポートによると、米国の検索の43%でGoogleのAI生成要約が表示されており、これは前年の15%から大幅に増加した。「AI Overviews」は通常の検索結果内に生成された要約を表示するのに対し、「AI Mode」は複雑なクエリや追問に対応する対話型インターフェースを提供する。ユーザーは、最初の検索の文脈を失うことなく、「AI Overvie
セコイア・キャピタルが出資するEmpirik、障害発生を未然に予測するため2100万ドルを調達
2020年にセコイア・キャピタルに最高デジタル・情報責任者(CDIO)として入社する前、エイボン・プリは10年以上にわたり、RubrikおよびVMwareでインフラストラクチャの運営に携わっていました。 3年前、大規模言語モデルがその真の可能性を見せ始めた頃、プリはセコイアのもう一人のITリーダーであるスディール・ドゥルジャティと共に、AIがインフラエンジニアにとっての大きな課題――技術的な障害が
関連特集おすすめ
コメント (56)
0/500
用AI去监控AI应用,这做法挺有趣的,有点「套娃」的味道。不过这类服务确实有需求,现在模型输出的稳定性确实是个痛点,尤其是对企业级应用来说。我们团队之前试过几个大模型API,偶尔抽风起来真的让人头疼,有个监测工具至少能提前预警吧。😅
This article on Composo is pretty eye-opening! It's wild how AI apps can be so powerful yet so unpredictable. Startups tackling LLM performance issues is a smart move—businesses need that reliability. Curious to see how this tech evolves! 😎
This article on Composo is pretty cool! It's wild how AI apps can be so powerful yet so unpredictable. Nice to see startups tackling the performance monitoring side—hope it makes LLMs more reliable for businesses! 😎
This article on Composo is super insightful! It’s wild how LLMs are so powerful yet so unpredictable. Excited to see startups tackling this to make AI apps more reliable! 😎
This article on Composo is pretty eye-opening! It's wild how AI apps can be so powerful yet so unpredictable. I wonder how startups like this will tackle the chaos of LLMs in real-world use. 🤔 Anyone else curious about the future of AI monitoring?

AIと大規模言語モデル(LLM)は非常に有望ですが、正直言って、成功したり失敗したりします。すべての問題を解決する時期は誰も確信していませんが、スタートアップが企業を支援して、LLM搭載アプリが期待通りに機能するように取り組んでいるのは驚くことではありません。
ロンドンを拠点とするスタートアップ、Composoが登場し、この問題を解決する優位性があると考えています。彼らは、企業がLLMアプリの正確性と基準を満たしているかを確認できるカスタムモデルを提供しています。
Composoはこの分野で唯一ではありません。Agenta、Freeplay、Humanloop、LangSmithといった競合も、人間やチェックリスト、従来のツールに頼らず、LLMベースのより良いアプリテスト方法を提供しようとしています。しかし、ComposoはノーコードオプションとAPIの両方を提供することで異なると主張しています。これにより、開発者だけでなく、ドメイン専門家や経営陣も inconsistency、品質、正確性を自分で確認できます。
その仕組みは次のとおりです:Composoは、AIアプリに求められる結果に基づいてトレーニングされた報酬モデルと、アプリ固有の基準を組み合わせます。そして、アプリの出力がその基準にどの程度一致するかをスコアリングします。例えば、医療トリアージチャットボットがある場合、危険信号の症状を監視するカスタムガイドラインを設定でき、Composoはアプリがそのルールをどれだけ守っているかを教えてくれます。
彼らは最近、Composo Alignの公開APIをリリースしました。これは、設定した任意の基準に基づいてLLMアプリを評価するものです。
その成果を上げているようです。Accenture、Palantir、McKinseyといった大企業が顧客リストに名を連ね、最近200万ドルのプレシード資金を獲得しました。AIの世界では資金が豊富に流れている中でこれは少なく思えるかもしれませんが、Composoの共同創業者兼CEO、Sebastian Foxは、巨額の資金は必要ないと言います。「少なくとも今後3年間は、何億ドルも調達する予定はありません。基盤モデルを構築している人々がいて、彼らが非常に効果的にやっているからです。それが私たちのUSPではありません」と、元McKinseyコンサルタントのFoxは述べました。「代わりに、毎朝起きて、OpenAIがモデルで大きな進歩を遂げたというニュースを見ると、それは私のビジネスにとって良いことです。」
新しい資金で、Composoはエンジニアリングチーム(共同創業者兼CTOで、元Graphcoreの機械学習エンジニアであるLuke Markhamが率いる)を強化し、さらに顧客を獲得し、R&Dを加速する計画です。「今年の焦点は、現在の技術をこれらの企業にスケールすることにあります」とFoxは言いました。
シードラウンドは、英国のAIプレシードファンドTwin Path Venturesが主導し、JVH VenturesとEWORも参加しました。EWORはすでにアクセラレータープログラムを通じてComposoを支援していました。「Composoは、企業AIの導入における重要なボトルネックに対処しています」とTwin Pathのスポークスパーソンは述べました。
このボトルネックは、Foxによると、AIシーン全体、特にビジネスにとって大きな問題です。「人々は興奮の誇大広告を超えて、今、『これが現在の形で私のビジネスに本当に変化をもたらすのか?信頼性が十分でないし、一貫性もない。たとえそうであっても、それがどの程度なのか証明できない』と考えています」と彼は説明しました。
これは、AIを使いたいがリスクを心配する企業にとって、Composoを非常に価値あるものにする可能性があります。そのため、彼らは業界に依存しないが、コンプライアンス、法律、医療、セキュリティに重点を置いています。
差別化要因について、Foxは彼らの成果を再現するのは簡単ではないと言います。「モデルのアーキテクチャと、トレーニングに使用したデータがあります」と彼は述べ、Composo Alignが「専門家の評価の大きなデータセット」でトレーニングされたと付け加えました。
確かに、テック大手が力を入れてこの問題を解決しようとするかもしれませんが、Composoは先行していると考えています。「もう一つは、時間とともに蓄積するデータです」とFoxは、評価の好みを構築する方法について語りました。
柔軟な基準セットでアプリを評価できるため、Composoは、より硬直したアプローチの競合よりも、エージェント型AIの台頭に適していると考えています。「私の意見では、エージェントがうまく機能する段階にはまだ達していません。それを解決しようとしているのです」とFoxは言いました。
*TechCrunchにはAIに焦点を当てたニュースレターがあります!毎週水曜日に受信箱で受け取るには、ここでサインアップしてください。*
AIモデルルーティングが勢いを増す中、StripeがOpenRouterを買収へ
Stripeは、開発者が単一のインターフェースを通じて数百のモデルにアクセスできるAIモデルルーティングプラットフォーム「OpenRouter」の買収に合意した。この買収により、StripeのAI活用やトークンベースの課金に関する既存の取り組みに、モデルの選択およびルーティング機能が追加されることになる。Stripeによると、OpenRouterは80社以上のプロバイダーが提供する400以上のモデ
GoogleのAI概要記事が検索結果で存在感を増している
Similarwebの「2026年生成AIの現状」レポートによると、米国の検索の43%でGoogleのAI生成要約が表示されており、これは前年の15%から大幅に増加した。「AI Overviews」は通常の検索結果内に生成された要約を表示するのに対し、「AI Mode」は複雑なクエリや追問に対応する対話型インターフェースを提供する。ユーザーは、最初の検索の文脈を失うことなく、「AI Overvie
セコイア・キャピタルが出資するEmpirik、障害発生を未然に予測するため2100万ドルを調達
2020年にセコイア・キャピタルに最高デジタル・情報責任者(CDIO)として入社する前、エイボン・プリは10年以上にわたり、RubrikおよびVMwareでインフラストラクチャの運営に携わっていました。 3年前、大規模言語モデルがその真の可能性を見せ始めた頃、プリはセコイアのもう一人のITリーダーであるスディール・ドゥルジャティと共に、AIがインフラエンジニアにとっての大きな課題――技術的な障害が
用AI去监控AI应用,这做法挺有趣的,有点「套娃」的味道。不过这类服务确实有需求,现在模型输出的稳定性确实是个痛点,尤其是对企业级应用来说。我们团队之前试过几个大模型API,偶尔抽风起来真的让人头疼,有个监测工具至少能提前预警吧。😅
This article on Composo is pretty eye-opening! It's wild how AI apps can be so powerful yet so unpredictable. Startups tackling LLM performance issues is a smart move—businesses need that reliability. Curious to see how this tech evolves! 😎
This article on Composo is pretty cool! It's wild how AI apps can be so powerful yet so unpredictable. Nice to see startups tackling the performance monitoring side—hope it makes LLMs more reliable for businesses! 😎
This article on Composo is super insightful! It’s wild how LLMs are so powerful yet so unpredictable. Excited to see startups tackling this to make AI apps more reliable! 😎
This article on Composo is pretty eye-opening! It's wild how AI apps can be so powerful yet so unpredictable. I wonder how startups like this will tackle the chaos of LLMs in real-world use. 🤔 Anyone else curious about the future of AI monitoring?





家






