5 августа 2026
29
На результаты внедрения искусственного интеллекта в компаниях влияет сложный комплекс факторов. Для получения эффективного решения необходим контроль его качества и устранение узких мест на протяжении всей работы над проектом. О том, как этого добиться, рассказали заместитель директора центра перспективных разработок IBS Денис Воденеев и старший аналитик группы Data Science IBS Илья Гайдуков.
Почему инициативы по внедрению ИИ часто не срабатывают
Исследование Массачусетского технологического института показало: 95% компаний не получают прибыли от инвестиций в искусственный интеллект. Это не значит, что у умных систем низкий потенциал применения в бизнесе — просто к их внедрению подходят недостаточно системно. Желая быстро достичь результатов, многие руководители воспринимают ИИ как «волшебную таблетку» и забывают, что эффективность таких технологий зависит от подготовительной работы, управления рисками, архитектуры ПО, методов тестирования и других факторов.ИИ-инициативы принесут разочарование и неоправданные затраты, если пытаться интегрировать искусственный интеллект в ИТ-ландшафт, который для него не предназначен. Другая распространенная причина трудностей — отсутствие конкретной цели или упор на технологии вместо фокуса на задачах бизнеса. Еще один способ провалить проект — неправильно выбрать пилотное направление или попытаться сразу решить глобальную задачу без апробирования модели ИИ или минимально жизнеспособного продукта (MVP) на старте.
Искусственный интеллект чувствителен к среде внедрения, поэтому не стоит ждать от него эффективной работы, если в компании не формализованы процессы, а данные противоречивы, разрозненны, неполны или не соответствуют нужному формату. Если на начальных этапах жизненного цикла не учесть скрытые задачи или недооценить масштаб применения системы, она также не принесет пользы. Понятие среды охватывает не только технологическую и бизнес-составляющую, но и человеческий фактор. Если не подготовить сотрудников к внедрению в их работу таких инструментов, можно получить отличное решение, которым никто не будет пользоваться.
Некоторые компании теряют вложенные средства из-за завышенных ожиданий и непонимания ограничений ИИ. Другие внедряют умные технологии ради статуса инновационного бизнеса. Также интеграции искусственного интеллекта может помешать неприятие изменений со стороны персонала, которое может вылиться в открытое сопротивление и саботаж.
Правильный фундамент для умных решений
Ответственный подход к реализации ИИ-инициатив начинается с предпроектного этапа. Продуманная стратегия на этой стадии позволяет сформировать полезное для бизнеса решение и повысить шансы на его успешное внедрение.Начать стоит с формализации цели проекта. Размытые ориентиры необходимо превратить в четко определенную бизнес-задачу, которую позволяет решить искусственный интеллект. Важно выявить реальные, а не декларируемые потребности владельцев процессов, и определить, что конкретно должно измениться в компании в результате внедрения ИИ. Необходимо задать прямые и косвенные критерии успеха. Они должны максимально точно и адекватно отражать ценность, которую можно получить по итогам реализации проекта.
Прочный фундамент будущей системы не удастся сформировать без анализа данных и процессов. Он позволит понять, насколько реально запустить модель ИИ на имеющихся данных, встроить ее в операционную деятельность бизнеса и получить нужные результаты. Инвентаризация источников, оценка информативности, качества и потенциала с помощью инструментов DA/DS помогут сделать объективный вывод, достаточно ли текущего качества данных для достижения критериев успеха. Карты процессов «как есть» (AS IS) и «как должно быть» (TO BE), определение точек встраивания и приоритизация пригодятся для планирования, в какой процесс и каким образом будет встроено ИИ-решение.
Еще один ключевой шаг на подготовительном этапе — выявить и оценить технические, организационные, этические, регуляторные и другие риски, а также саму целесообразность запуска. Решение об интеграции ИИ должно быть четко мотивированным, поэтому важно определить, достаточно ли высока ожидаемая ценность для того, чтобы начинать работу над проектом при текущем уровне затрат и рисков. Эффективными методами выполнения этой задачи могут стать оценка ROI, поиск простейшей альтернативы, анализ матриц «ценность vs сложность» и «желание vs готовность».
Такой взвешенный и системный подход на старте позволяет не просто «запустить ИИ», а создать решение, которое действительно работает и приносит измеримую пользу.
Управление качеством от проектирования до внедрения
Интегрированный контроль качества должен стать неотъемлемой частью процессов разработки и внедрения ИИ-инициатив. Это максимально приблизит готовое решение к реальным потребностям компании, обеспечит его стабильную, безопасную и удобную эксплуатацию и позволит избежать сверх затрат на исправления на более поздних этапах.На этапе проектирования следует проанализировать требования к данным, выявить риски, составить матрицу трассировки требований и стратегию тестовых данных. Потребуются и механизмы валидации. Команде необходимо разработать тест-дизайн, подготовить инфраструктуру для тестирования и тестовые данные, утвердить технологический стек.
В процессе разработки надо обратить особое внимание на валидацию данных: проверку их полноты, типа, диапазона, выпадения и корректности разметки. Другая приоритетная задача на этой стадии — комплексное тестирование ИИ-решения, в том числе функциональное. При работе с ИИ-инициативами оно может включать такие специфичные подходы, как метаморфное, биас-тестирование и тестирование этики.
Испытания модели должны стать еще более масштабными при внедрении. В этой части жизненного цикла они делятся на два основных блока. Первый — тестирование производительности, стабильности и стрессоустойчивости, оценка масштабируемости и скорости работы ИИ-решения. Второй — тестирование на соответствие регуляторным требованиям, приемо-сдаточные испытания и A/B-тестирование. Только после этого можно переходить к запуску в эксплуатацию.
Подходы к тестированию моделей ИИ
Ответственный, комплексный подход к тестированию умных систем уже стал обязательным для отрасли. Требования в этой области вошли в российский национальный стандарт ГОСТ Р ИСО/МЭК 42001-2024, который действует с начала 2025 года. Годом ранее Альянс в сфере искусственного интеллекта внес «оценку качества работы методов ИИ» в базовую модель профессий и компетенций — список требований для профильных специалистов. Между тем навыки тестирования умных решений с 2021 года подтверждают с помощью международной сертификации ISTQB CT-AI.При испытаниях моделей искусственного интеллекта часто используют классические подходы. В их число входит отдельное тестирование ИИ-компонентов, которое позволяет проверить характерные проблемные зоны, учитывая специфику типа системы. Его дополняет интеграционное тестирование, помогающее убедиться в работоспособности бизнес-процесса, связанного с искусственным интеллектом. Проверки ключевых процессов в компании после изменений выполняют, формируя регрессионные наборы. Применение этих методов можно автоматизировать для экономии ресурсов.
Особое внимание стоит уделить биас-тестированию, метаморфному тестированию и тестированию этики. Первое из них предполагает систематическую проверку ИИ-систем. Этот подход применяют как к классическим моделям машинного обучения, так и к большим языковым моделям. Биас-тестирование помогает выявлять несогласованное, непредсказуемое или последовательно ошибочное поведение. По итогам анализа определяют консистентность, логическую согласованность и дрейф модели, то есть снижение качества и точности ее работы по мере изменений в исходных данных или бизнес-среде.
Метаморфное тестирование используют для проверки ИИ-систем на логичность и предсказуемость. Оно помогает убедиться в том, что модель соблюдает заданные логические правила и последовательно трансформирует результаты при изменении входных данных. Также этот подход позволяет находить «черных лебедей» — скрытые ошибки, которые возникают при редких комбинациях параметров.
Тестирование этики проверяет ИИ-системы на соответствие общественным и корпоративным ценностям. В первую очередь анализ затрагивает объяснимость решений, отсутствие дискриминации и человекоцентричность. Его применение помогает удостовериться, что в основе проектирования решения лежат потребности, возможности и комфорт конечного пользователя, а не только бизнес-задачи и технологии.