Cekuraは、以前はVoceraとして知られていた会社で、AI音声エージェントのための最先端のテストと評価サービスを提供します。AI駆動の顧客インタラクションを活用する組織向けに設計されたCekuraは、シームレスで効率的なエージェントパフォーマンスを保証します。ワークフロー、ペルソナ、実際の音声を使用して、Cekuraは数え切れないシナリオをシミュレートし、カスタムメトリックに基づいて音声エージェントを評価および調整するのに役立ちます。さらに、実用的なインサイト、リアルタイムモニタリング、最適なエージェントパフォーマンスのための即時通知を提供します。

Semi Agentは、計画、実行、長期的なコンテキストの保持が可能なAIエージェントを構築するためのモジュール式アーキテクチャを提供します。人気の言語モデルと連携し、カスタム機能のためのツール定義をサポートし、会話やタスク指向のメモリを維持します。開発者はステップバイステップの計画を定義し、外部APIやスクリプトをツールとして接続し、組み込みのロギングを利用してエージェントの動作をデバッグ・最適化できます。オープンソースの設計とPythonベースにより、容易なカスタマイズ・拡張・既存パイプラインへの統合が可能です。

WorFBenchは、大規模言語モデルに基づくAIエージェントの能力を評価するために設計された総合的なオープンソースフレームワークです。旅程計画からコード生成ワークフローまで、多様なタスクを提供し、それぞれに明確な目標と評価指標を設定しています。ユーザーはカスタムエージェント戦略を設定し、標準化されたAPIを通じて外部ツールと連携し、自動評価を実行して、分解、計画の深さ、ツール呼び出しの正確さ、および最終出力の質を記録できます。内蔵された可視化ダッシュボードは各エージェントの意思決定過程を追跡し、長所と短所を特定しやすくします。WorFBenchのモジュラー設計は、新しいタスクやモデルを迅速に拡張でき、再現性のある研究や比較研究を促進します。