HoneyHive — это комплексная платформа, предоставляющая инструменты для оценки ИИ, тестирования и наблюдения, в первую очередь предназначенная для команд, создающих и поддерживающих приложения GenAI. Она позволяет разработчикам автоматически тестировать, оценивать и проводить бенчмаркинг моделей, агентов и RAG-конвейеров по критериям безопасности и производительности. Объединяя производственные данные, такие как трассировки, оценки и отзывы пользователей, HoneyHive содействует обнаружению аномалий, тщательному тестированию и итеративным улучшениям в системах ИИ, обеспечивая их готовность к производству и надежность.

Bot-With-Plan предоставляет модульный шаблон на Python для построения AI-агентов, которые сначала создают подробный план перед выполнением. Он использует GPT от OpenAI для анализа инструкций пользователя, разбиения задач на последовательные шаги, проверки плана и последующего выполнения каждого через внешние инструменты (например, поиск в интернете или калькуляторы). Включает управление подсказками, анализ планов, оркестрацию выполнения и обработку ошибок. Разделение фаз планирования и исполнения обеспечивает лучший контроль, облегчает отладку и расширение функционала с новыми инструментами или возможностями.