DZone.com Feed на русском
Подписаться
Шлюз безопасности GenAI: Сквозная архитектура
Большие языковые модели (LLM) являются мощными компонентами приложений, но их не следует напрямую предоставлять недоверенным пользователям или непроверенным документам. Запрос может содержать переопределение инструкций, скрытый секрет или попытку заставить извлеченный контент действовать как системный запрос.Шлюз безопасности GenAI обеспечивает эту границу. Он нормализует ввод, запускает дополнительные детекторы, рассчитывает ограниченный показатель риска, защищает извлеченные документы и очищает ответ перед его отправкой клиенту.