DigitalOcean、本番エージェントの異常を検知するSignalsと修正検証のSimulationsを公開プレビュー

DigitalOceanはOpen Intelligence Summitに先立ち、本番で動くエージェントの失敗を早期に見つけ直すためのAgent Learning Servicesを発表した。中核はSignalsとSimulationsで、いずれも公開プレビュー。SignalsはManaged AgentsとInference Engine上の本番トラフィックを監視し、ユーザーの不満やツールの失敗、タイムアウトやレート制限といったインフラ制約をセッション単位で分類する。ツール呼び出しがHTTP 200でも、誤ったリージョンを選ぶなどユーザーにとって失敗になるケースを想定している。生のトレースは大量になるため、安価な一次トリアージで調べる価値のあるセッションを選び、フラグ付きセッションは1クリックで評価シナリオにできる。SimulationsはDigitalOcean Evaluationsの新機能で、Signals由来や自然言語で書いたシナリオを、本番と同じハーネスとツール構成の隔離サンドボックスでマルチターン再生し、LLMジャッジで採点する。Claude Code、Codex、OpenCodeなどHarness Runtimeが支えるハーネスに対応し、プレビュー時点ではLangChainやCrewAIなど第三者エージェントは対象外。あわせてInsights（観測）も公開プレビュー、Agent Data ServicesとInference Router optimizerはプライベートプレビューで提供される。