IMMA (Интерактивный мультимодальный память-агент) — это модульная структура, предназначенная для повышения эффективности диалогового AI за счет хранения постоянной памяти. Он кодирует текст, изображения и другие данные из прошлых взаимодействий в эффективное хранилище, осуществляет семантический поиск для предоставления релевантного контекста в новых диалогах и использует методы суммирования и фильтрации для сохранения связности. API IMMA позволяют разработчикам задавать собственные политики вставки и поиска памяти, интегрировать мультимодальные встраивания и настраивать агента под задачи конкретной области. Управляя долгосрочным контекстом пользователя, IMMA поддерживает сценарии, требующие преемственности, персонализации и многоэтапного рассуждения в продолжительных сессиях.

Пример Azure AI Travel Agents — это полномасштабная примерная реализация разговорного агента, который помогает пользователям планировать путешествия, генерируя персонализированные маршруты, ищет варианты полетов и отелей и отвечает на вопросы, связанные с путешествиями. Построен на базе Framework Azure AI Agent, он использует модели GPT от OpenAI для понимания и генерации естественного языка, использует Azure Functions для размещения навыков, таких как поиск погоды, и подключается к внешним API для получения информации о бронировании в реальном времени. Разработчики могут запускать его локально или развернуть на Azure, расширять существующие навыки или добавлять новые, например, конвертацию валют, рекомендации местных достопримечательностей или тревожные оповещения. В этом примере показано, как оркестрировать множество навыков на базе AI и управлять контекстом между сеансами, чтобы обеспечить надежное и масштабируемое решение для путешествий.