Top.Mail.Ru
РБК Компании

Доверенный ИИ: от концепции к практике

Можем ли мы доверять ИИ критически важные решения. Этот вопрос сегодня определяет успех цифровой трансформации
Доверенный ИИ: от концепции к практике
Источник изображения: Личный архив компании
Станислав Ежов
Станислав Ежов
Директор по ИИ «Группы Астра»

Окончил программу MBA по направлению «Международный бизнес и деловое администрирование» в МГИМО. До прихода в «Группу Астра» занимал позицию CPO Unified Communications в «МТС»

Подробнее про эксперта

За пять лет работы с искусственным интеллектом — с 2020 года — я наблюдаю, как эта технология превращается из экспериментального проекта в стратегический инструмент крупного бизнеса и государства. Система принимает решения о кредитовании тысяч малых предприятий, управляет энергоснабжением регионов, анализирует медицинские данные миллионов граждан. Ошибка здесь — это не просто сбой в алгоритме. Это экономические потери, риск для безопасности инфраструктуры, а иногда даже угроза жизни людей.

Но между внедрением технологии и получением реальной пользы от нее огромная пропасть, которая называется доверием. 

Регуляторная революция меняет правила

Когда в конце 2024 года появилась информация о планах регуляторов проверять ИИ-модели, обученные на государственных данных, многие восприняли это как очередное ограничение. Я считаю иначе. Это признание того факта, что ИИ вышел за пределы экспериментов.

С 1 марта 2026 вступают в силу новые требования ФСТЭК России к ИИ-системам в госсекторе. Запрещается использование облачных решений иностранных компаний для работы с критически важной информацией. Требуется верификация каждого ответа системы. Вводится обязательный мониторинг безопасности. Это ответ на реальные инциденты, когда сотрудники копировали конфиденциальные данные в общедоступные ИИ-сервисы.

В 2024 утечки данных в финансовом секторе России затронули 68 миллионов записей, причем каждая пятая касалась коммерческой информации. Когда эти данные используются для обучения ИИ-моделей, ставки резко возрастают.

Четыре столпа доверенного ИИ

В моей практике работы с крупными предприятиями я выделяю четыре фундаментальных принципа, которые отличают доверенный ИИ от обычного.

Объяснимость решений

Система должна раскрывать факторы своих решений понятным языком. Когда «Росатом» внедрил систему для прогнозирования качества продукции, она начала отслеживать более 2 миллионов технологических параметров. Расходы на техобслуживание сократились на 30%, уровень брака снизился с 2,3% до 0,9%. Но главное — каждое решение можно обосновать перед регулятором.

Защита данных на всех этапах

ОС Astra Linux, которая лежит в основе наших решений, имеет сертификаты всех регуляторов: Минобороны РФ, ФСТЭК России и ФСБ. Она позволяет работать с информацией любого уровня конфиденциальности, вплоть до «совершенно секретно». Это результат концепции Secure by Design, когда механизмы защиты закладываются на стадии архитектурного проектирования.

Постоянный мониторинг

Система отслеживает собственное поведение, обнаруживая деградацию точности. В сентябре правительство внедрило ИИ-модель в систему мониторинга нацпроектов и госпрограмм. Она в онлайн-режиме анализирует 100% мероприятий, а точность прогнозирования рисков достигла 96%. Каждое решение может быть объяснено и проверено человеком.

Защита от целенаправленных атак

Злоумышленники манипулируют входными данными, заставляя модель принимать выгодные решения. Невидимые изменения в изображениях и промп-инъекции «сбивают» нейросеть, стикеры на дорожных знаках ломают автопилот, специальные очки обманывают системы распознавания лиц. Для медицинской диагностики, финскоринга и промышленной автоматизации это реальная угроза.

Государство как архитектор доверия

В 2027 году заработает реестр доверенных технологий ИИ. Компании будут проходить многоступенчатое тестирование на специализированных полигонах, независимый аудит архитектуры, сертификацию по единым критериям безопасности.

Появление этого реестра изменит рынок: крупные энергетические компании, банки, промышленники смогут закупать только доверенные решения. Центробанк уже сейчас включает требования к ИИ в проверки информационных систем кредитных организаций. Регуляторные нормы формируют рыночные стандарты качества, и это гарантирует заказчику: решение проверено не только разработчиком, но и независимыми экспертами, соответствует требованиям регуляторов, безопасно работает с критической информацией.

Три отрасли — три приоритета безопасности

Финансовый сектор: абсолютная прозрачность

Центробанк требует, чтобы кредитная организация объяснила каждое решение ИИ: по кредитным заявкам, оценке рисков, выявлению мошенничества. Непрозрачные модели — «черные ящики» недопустимы. Технологии объяснимого ИИ — обязательное требование.

Госсектор: полный технологический суверенитет

Абсолютный запрет зарубежных облачных сервисов, обязательная локализация данных, независимые аудиты, возможность проверить исходный код. Это гарантирует отсутствие недекларированных возможностей, уверенность в том, что система не отключится из-за геополитики, полный контроль над обновлениями.

Промышленность и энергетика: максимальная надежность

Когда ИИ контролирует трубопровод, электросеть или производственную линию, он должен иметь встроенные механизмы безопасного отказа. Цифровые двойники для прогнозирования критической инфраструктуры требуют абсолютной надежности: ошибка может стоить жизней и парализовать целые регионы. Группа «Россети» и Сбербанк в прошлом году запустили проект разработки специализированной генеративной модели для электросетевого комплекса. Цель — повысить надежность электроснабжения для подавляющей части предприятий и населения страны.

Реальность внедрения: барьеры и решения

Согласно исследованию НИУ ВШЭ, 97% организаций, использующих ИИ, почувствовали бизнес-эффект: повысились скорость и качество процессов. Но внедрение далось нелегко.

Опрос 2,3 тысяч компаний выявил девять главных барьеров. На первом месте высокие затраты: 63,6% респондентов. Дефицит специалистов в области ИИ отметили почти 50%. Особенно показательно, что 31% опрошенных выразили обеспокоенность безопасностью передачи данных облачным платформам.

Практический путь к доверенному ИИ

Шаг первый — инвентаризация: проведите аудит ИИ-платформ. Что они обрабатывают? Где хранятся данные? Сможете ли объяснить каждый результат регулятору?

Шаг второй — классификация: разделите платформы по критичности данных. Анализ новостей и обработка финансовых данных клиентов — разные уровни риска.

Шаг третий — чек-лист доверия: проверьте локализацию, объяснимость выводов, мониторинг качества, аудируемость кода, защиту от атак.

Шаг четвертый — непрерывный контроль: мониторьте работу, выявляйте аномалии, реагируйте на отклонения.

Компании, которые прошли эти четыре этапа, уже становятся лидерами в управлении рисками ИИ и получают конкурентное преимущество при госзакупках и партнерствах.

Примеры из практики крупного бизнеса

Российские компании активно внедряют доверенный ИИ. «Северсталь» интегрировала интеллектуальный агент, и в результате нарастила производительность более чем на 5%. 

«Норникель» благодаря ИИ-решениям увеличил долю извлечения металлов из руды на 2,5%, достигнув экономического эффекта в 100 миллионов долларов за 2023 год.

Выбор, который определяет будущее

К 2030 году уровень доверия граждан к технологиям ИИ должен вырасти с 55% до 80%. Это невозможно без конкретных результатов, которые люди видят в своей жизни.

Победителями станут не те, кто внедрил ИИ быстрее, а те, кто выбрал путь доверенных технологий с самого начала. Они избегут резонансных ИБ-инцидентов, потому что системы спроектированы с защитой на уровне архитектуры. их вендоры станут предпочтительными партнерами госструктур и крупного бизнеса, потому что их технологиям можно доверять критически важные процессы.

Концепция доверенного ИИ — это не ограничение возможностей технологии. Наоборот, это условие ее масштабного внедрения. Частные компании и госструктуры готовы использовать ИИ для критически важных процессов только тогда, когда уверены в его надежности и безопасности.

Россия имеет все возможности стать лидером в области доверенного ИИ. Следующие пять лет определят, сможем ли мы превратить технологическое преимущество в устойчивое лидерство. Я уверен, что сможем. Потому что у нас есть не только технологии, но и понимание того, как сделать их по-настоящему полезными и безопасными для бизнеса, государства и общества.

Интересное:

Новости отрасли:

Все новости:

Публикация компании

Контакты

ГлавноеЭкспертыДобавить
новость
КейсыМероприятия