GAMA Genstar Pluginは、OpenAIやローカルLLM、カスタムモデルエンドポイントへのコネクタを提供し、生成型AIの能力をGAMAプラットフォームに追加します。ユーザーはGAMLでプロンプトやパイプラインを定義し、エージェントの意思決定や環境記述、シナリオパラメータをリアルタイムに生成できます。プラグインは同期・非同期のAPI呼び出し、レスポンスのキャッシュ、パラメータ調整をサポートし、大規模シミュレーションへの自然言語モデルの統合を容易にします。

MARFTはPythonベースのLLMを対象とし、再現性のある実験と協調AIシステムの迅速なプロトタイピングを可能にします。

WorFBenchは、大規模言語モデルに基づくAIエージェントの能力を評価するために設計された総合的なオープンソースフレームワークです。旅程計画からコード生成ワークフローまで、多様なタスクを提供し、それぞれに明確な目標と評価指標を設定しています。ユーザーはカスタムエージェント戦略を設定し、標準化されたAPIを通じて外部ツールと連携し、自動評価を実行して、分解、計画の深さ、ツール呼び出しの正確さ、および最終出力の質を記録できます。内蔵された可視化ダッシュボードは各エージェントの意思決定過程を追跡し、長所と短所を特定しやすくします。WorFBenchのモジュラー設計は、新しいタスクやモデルを迅速に拡張でき、再現性のある研究や比較研究を促進します。