8. Искусственный интеллект: три корзины
Сегодня функции с приставкой «умный» есть у всех. Разница в том, работают ли они. Мы делим их на три корзины.
Корзина 1 — работает и окупается. Полный балл при подтверждении. - Помощь в производстве курсов: черновик сценария, тестовые вопросы, переработка текста под формат, озвучка. Это прямая экономия часов методиста, её можно посчитать. - Перевод программ на языки регионов присутствия. - Поиск по внутренней базе знаний, который даёт ответ по существу, а не список ссылок. Для линейного персонала это, возможно, полезнее всех курсов вместе взятых. - Автоматическая расшифровка внутренних выступлений и нарезка их на короткие материалы.
Корзина 2 — работает выборочно. Половина балла; полный — только при подтверждении со стороны заказчика. - Тренажёры диалогов: отработка сложного разговора с клиентом или подчинённым. Потенциал есть, качество сильно зависит от настройки. - Персональные траектории обучения. Идея верная, но на бедных данных рекомендации выдают банальность.
Корзина 3 — маркетинг. Ноль баллов и отдельная строка в карточке. - «Предсказание потенциала сотрудника» по его поведению в системе обучения. Данных для этого недостаточно, объяснить решение невозможно, а цена ошибки — чужая карьера. - Оценка вовлечённости по времени, проведённому на странице.
Общее условие для всей группы. Если непонятно, где размещается модель, на каких данных она обучена и что происходит с текстами компании после обработки, — функция не проходит проверку службы безопасности заказчика и оценивается нулём, какой бы полезной она ни была.
Дополнительно смотрим, предусмотрена ли обязательная человеческая проверка нормативных курсов. Сгенерированный машиной курс по охране труда с фактической ошибкой — это не «неудачный контент», это риск для жизни человека.
9. Что снимает продукт с дистанции
Есть признаки, при которых крупная компания прекращает переговоры независимо от качества продукта. Мы переводим их в формальное правило, чтобы решение не зависело от настроения редакции.
Продукт не ранжируется, если:
1. Нигде не описано, как забрать свои данные при уходе от поставщика.
2. Тестовый доступ не даётся ни при каких условиях до подписания договора.
3. Нет никаких данных о поведении под нагрузкой — для массового и промышленного сегментов.
4. Нет ни одного примера заказчика сопоставимого масштаба, а вместо него формулировка «наши клиенты не разрешают о себе рассказывать».
5. Нет документации на интерфейсы обмена данными.
6. Данные невозможно разместить на территории России — для промышленного сегмента и для части заказчиков массового.
Такие продукты попадают в отдельный перечень с указанием конкретной причины. Это не чёрный список. Это честная информация: продукт не проходит входной фильтр крупной закупки.
Снижают балл, но не снимают с дистанции:
Цена не разложена на систему, курсы и услуги
Два пункта обнуляются
План развития без дат
Пункт обнуляется
Обещание полного запуска в крупной компании за шесть недель
Минус полбалла и обязательный комментарий
Последнее требует пояснения. Реальные сроки для компании на десятки тысяч человек такие: пилот на ограниченном участке — два-три месяца; работа базового контура — шесть-девять месяцев; полноценная работа со всеми связями и отчётностью — год-полтора. Поставщик, обещающий шесть недель, либо не понимает масштаб задачи, либо понимает и молчит. Оба варианта плохие, и покупателю полезно знать об этом заранее.
10. Деньги: почему мы не сравниваем цены
Мы не ставим баллы за стоимость. И вот почему.
Цена одной и той же системы для двух компаний различается в разы — из-за численности, числа юридических лиц, глубины связей с другими программами, объёма курсов и наличия собственной команды. Сравнивать такие цифры в таблице значит создавать точность, которой нет.
Вместо оценки цены мы делаем две вещи.
Первое: публикуем структуру расходов. Полная стоимость владения на три года складывается из восьми частей:
1. Лицензии или подписка.
2. Внедрение: настройка, перенос старых данных, связи с другими системами.
3. Оборудование, если система стоит внутри компании.
4. Поддержка и обновления.
5. Люди: администраторы, методисты, авторы курсов, первая линия помощи пользователям. У крупного заказчика это часто самая большая строка, и её систематически забывают при расчёте.
6. Производство курсов — своими силами и подрядом.
7. Время сотрудников, потраченное на обучение. Формально это не бюджет кадровой службы, но для компании это реальные деньги. Час смены, умноженный на десятки тысяч человек, перекрывает стоимость лицензий в разы.
8. Запас на доработки первого года — их всегда больше, чем в плане.
Из этого следует правило, которое стоит запомнить любому покупателю: лицензии редко составляют больше трети всех затрат первого года. Значит, соревнование поставщиков по цене лицензии — это соревнование за небольшую часть бюджета. Рейтинг не должен воспроизводить эту оптику.
Второе: оцениваем прозрачность. Разложена ли цена. Названы ли доплаты. Понятно ли, что будет с ценой на третий год. Это уже свойство поставщика, а не конфигурации, и его можно сравнивать честно.
Диапазоны стоимости мы публикуем порядками величин по группам численности — с обязательным указанием, на какой конфигурации считали.
11. Что мы публикуем по каждому продукту
Единая карточка. Незаполненный обязательный блок — продукт не публикуется.
1. Название, поставщик, тип решения, в каких сегментах оценивался.
2. Балл по каждому сегменту с расшифровкой по девяти критериям.
3. Полнота данных: сколько пунктов подтверждено на каком уровне, сколько имеют статус «нет данных». 3а. Независимость подтверждений: какая доля фактов держится только на словах поставщика, а какая подтверждена со стороны. Это отдельная публикуемая цифра. Продукт, у которого девяносто процентов баллов набрано на собственных материалах, и продукт с таким же баллом, но подтверждённый заказчиками, — это разная степень риска для покупателя, и он должен видеть разницу до подписания договора.
4. Где размещаются данные, есть ли продукт в реестре отечественного ПО.
5. Подтверждённый масштаб: максимальная численность у реального заказчика, пиковая нагрузка, отрасль.
6. Экономика: модель оплаты, что входит и что доплачивается.
7. Реальные сроки внедрения у заказчиков — если такие данные публично есть.
8. Функции искусственного интеллекта, разнесённые по трём корзинам.
9. Процедура ухода: как забрать данные, в каком виде, за какой срок.
10. Кому подходит.
11. Кому НЕ подходит. Обязательный блок, минимум три конкретных ограничения со ссылками. Это самая полезная часть любого обзора и самая редкая. Она же — проверка честности нашего рейтинга: если её нет, значит, мы писали рекламу.
12. Дата актуальности и дата следующего пересмотра.
13. История изменений: какое место было, какое стало, за счёт чего.
12. Честные ограничения этого метода
Ни одна методика не измеряет всё. Список того, чего мы не измеряем, — часть методики, а не оправдание.
• Мы измеряем открытость поставщика вместе с качеством продукта. Об этом сказано в разделе 2. Высокий балл означает «хорошо документированный и подтверждённый продукт», а не «лучший продукт вообще».
• Приоритет внешних источников смещает картину в пользу тех, кто работает с отраслевыми площадками. Небольшой поставщик с сильным продуктом, но без ресурсов на публичную активность, окажется ниже. Мы считаем это меньшим злом, чем одинаковое доверие к собственным заявлениям всех подряд, но признаём как искажение. Частично оно компенсируется тем, что высшую степень подтверждения даёт не публикация в СМИ, а рассказ заказчика и запись в реестре: и то и другое доступно компании любого размера.
• Мы не оцениваем качество методики обучения. Оно зависит от команды заказчика, а не от программы. Мы оцениваем инструменты, а не то, как ими пользуются.
• Мы не оцениваем качество готовых библиотек курсов. Это другой предмет покупки и отдельный список.
• Мы не оцениваем самописные системы. Их нельзя купить, сравнивать не с чем. Публикуем отдельно как примеры.
• Мы не называем точных цен. Только структуру и порядки величин.
• Мы не предсказываем, выживет ли поставщик как компания. Мы фиксируем его обязательства и историю, а не финансовое состояние.
• Рейтинг не применим к среднему бизнесу. Он про компании на десятки тысяч человек. Компании на пятьсот сотрудников его выводы могут навредить: она купит избыточно сложное и дорогое решение.
13. Как рейтинг живёт дальше
Рынок меняется быстрее, чем выходят годовые обзоры. Поэтому:
• Полный пересбор данных — раз в год.
• Обновление статусов — раз в полгода: новые публикации поставщиков, крупные обновления продуктов, изменения в реестрах, новые кейсы.
• Срочная правка — в течение десяти рабочих дней, если продукт ушёл с рынка, сменил владельца или произошёл подтверждённый инцидент с безопасностью.
• Дата актуальности стоит на каждой карточке, а не только на общей странице.
• Все изменения публичны: что изменилось, когда и на каком основании.
Как читателю проверить нас
Рейтинг устроен так, чтобы это можно было сделать за вечер.
1. Откройте карточку интересующего продукта.
2. Возьмите любой пункт с высоким баллом и перейдите по ссылке источника. Убедитесь, что там написано то, что мы утверждаем.
3. Возьмите любой пункт со статусом «нет данных» и попробуйте найти информацию сами. Нашли — напишите нам, мы обновим карточку и укажем это в истории изменений.
4. Посмотрите долю пунктов «нет данных» у продукта. Высокая доля означает, что перед покупкой вам придётся выяснять всё самому.
5. Прочитайте блок «кому НЕ подходит». Если ваша компания там описана — дальше можно не читать, и это лучшее, что рейтинг может для вас сделать.