prompt injection

  1. К

    SecAI: защита ML и LLM-продуктов от prompt injection и data poisoning

    You must be registered for see element. В мире, где каждая компания спешит встроить LLM в продукт, злоумышленники уже нашли слабые места. Две самые опасные атаки, с которых всё начинается, — Prompt Injection и Data Poisoning. Обычные фильтры и сканеры безопасности против них Эти уязвимости...
  2. Luxkerr

    Статья Red Team против AI-продукта: как тестировать безопасность LLM-сервиса

    You must be registered for see element. AI Red Teaming для LLM‑продукта начинается с понимания простой вещи: модель почти никогда не является единственной точкой риска. Риск живёт в системе вокруг неё - в том, какие данные подмешиваются в контекст, какие инструменты доступны, как устроены...
  3. Luxkerr

    News Первый AI-вымогатель PromptLock: как работает и чем опасен

    You must be registered for see element. Исследователи компании ESET You must be registered for see element. об обнаружении первого в мире рафинированного ими программного обеспечения-вымогателя, использующего искусственный интеллект. Зловред под названием PromptLock представляет собой инъекцию...