Перейти к основному содержимому

Сервис взаимодействия с большими языковыми моделями

Сервис взаимодействия с большими языковыми моделями обеспечивает диалоговое взаимодействие фронтенд-приложений и сервисов бизнес-логики с большими языковыми моделями.

Основные функции сервиса:

  • Обработка пользовательских запросов в обычном режиме и с учетом RAG-архитектуры;
  • Оцифровка текста из изображений;
  • Управление коллекциями контекстов поиска для RAG-архитектуры

Настройки сервиса взаимодействия с большими языковыми моделями включают указание адреса и параметров подключения к большим язхыковым моделям.

Примеры использования сервиса

В бизнес-модуле Атомкод.ИИ предоставлены примеры использования всех методов сервиса как для создания контекстов поиска, так и для взаимодействия пользователя с большими языковыми моделями через компоненту Платформы AIChat.