AI-батл · опитування «Використання штучного інтелекту в роботі», 53 відповіді

Індекс зрілості ШІ: інструмент, який працює далі за це опитування

Я не аналізував, хто що відповів. Я зібрав з відповідей вимірювальний прилад: індекс, який оцінює людину за поведінкою, а не за самооцінкою, шкалу рівнів і тест на вісім питань. Опитування стає нульовим заміром, а не разовим слайдом.

002020404060608080100100Двигуни · 20Автономні · 8Резерв · 5Незалучені · 20Р-27, Каскад. Індекс 0, готовність 0. Самооцінка 1/5Р-24, Каскад. Індекс 2, готовність 16. Самооцінка 3/5Р-7, CS. Індекс 18, готовність 52. Самооцінка 1/5Р-25, Каскад. Індекс 18, готовність 32. Самооцінка 1/5Р-33, Каскад. Індекс 19, готовність 16. Самооцінка 1/5Р-48, Сінерджі. Індекс 19, готовність 64. Самооцінка 1/5Р-39, Каскад. Індекс 25, готовність 62. Самооцінка 2/5Р-37, Профітех. Індекс 29, готовність 34. Самооцінка 3/5Р-43, Профітех. Індекс 32, готовність 23. Самооцінка 2/5Р-18, Профітех. Індекс 35, готовність 7. Самооцінка 1/5Р-30, Юрент. Індекс 37, готовність 44. Самооцінка 3/5Р-8, Профітех. Індекс 37, готовність 45. Самооцінка 2/5Р-52, Сінерджі. Індекс 41, готовність 38. Самооцінка 4/5Р-19, Профітех. Індекс 42, готовність 16. Самооцінка 1/5Р-50, CS. Індекс 45, готовність 58. Самооцінка 2/5Р-41, Каскад. Індекс 47, готовність 16. Самооцінка 2/5Р-44, CS. Індекс 47, готовність 93. Самооцінка 2/5Р-26, Профітех. Індекс 48, готовність 28. Самооцінка 3/5Р-9, Профітех. Індекс 50, готовність 54. Самооцінка 3/5Р-15, Профітех. Індекс 50, готовність 0. Самооцінка 2/5Р-36, Юрент. Індекс 53, готовність 36. Самооцінка 2/5Р-45, Сінерджі. Індекс 54, готовність 20. Самооцінка 4/5Р-34, Сінерджі. Індекс 56, готовність 18. Самооцінка 2/5Р-16, Сінерджі. Індекс 56, готовність 68. Самооцінка 3/5Р-21, CS. Індекс 60, готовність 62. Самооцінка 3/5Р-47, Сінерджі. Індекс 63, готовність 35. Самооцінка 3/5Р-38, CS. Індекс 65, готовність 93. Самооцінка 5/5Р-54, Юрент. Індекс 66, готовність 68. Самооцінка 4/5Р-17, Профітех. Індекс 66, готовність 20. Самооцінка 1/5Р-11, Профітех. Індекс 67, готовність 52. Самооцінка 4/5Р-46, Сінерджі. Індекс 67, готовність 100. Самооцінка 3/5Р-6, Профітех. Індекс 71, готовність 70. Самооцінка 2/5Р-2, CS. Індекс 73, готовність 77. Самооцінка 3/5Р-51, Сінерджі. Індекс 73, готовність 36. Самооцінка 2/5Р-35, Сінерджі. Індекс 73, готовність 3. Самооцінка 4/5Р-31, Каскад. Індекс 74, готовність 54. Самооцінка 3/5Р-32, Каскад. Індекс 78, готовність 100. Самооцінка 3/5Р-53, CS. Індекс 78, готовність 0. Самооцінка 3/5Р-49, Сінерджі. Індекс 79, готовність 68. Самооцінка 4/5Р-10, Профітех. Індекс 79, готовність 85. Самооцінка 4/5Р-40, Каскад. Індекс 80, готовність 40. Самооцінка 3/5Р-29, Сінерджі. Індекс 82, готовність 100. Самооцінка 4/5Р-4, CS. Індекс 87, готовність 100. Самооцінка 4/5Р-22, Сінерджі. Індекс 88, готовність 68. Самооцінка 3/5Р-13, Профітех. Індекс 90, готовність 72. Самооцінка 4/5Р-23, CS. Індекс 92, готовність 62. Самооцінка 4/5Р-5, Профітех. Індекс 93, готовність 87. Самооцінка 5/5Р-28, Профітех. Індекс 94, готовність 100. Самооцінка 4/5Р-3, CS. Індекс 96, готовність 100. Самооцінка 4/5Р-12, Профітех. Індекс 97, готовність 93. Самооцінка 5/5Р-20, Каскад. Індекс 100, готовність 93. Самооцінка 4/5Р-14, Профітех. Індекс 100, готовність 100. Самооцінка 5/5Р-42, CS. Індекс 100, готовність 100. Самооцінка 5/5Індекс зрілості: що людина реально робить з ШІГотовність вчитися
Двигуни Автономні Резерв Незалучені учасник клубу ШІ
Кожна точка — одна людина. По горизонталі індекс зрілості, по вертикалі готовність вчитися. Наведіть курсор, щоб побачити деталі.
65медіанний індекс зрілості зі 100
19людей недооцінюють свій рівень
5у «Резерві»: готові, але ще слабкі
8сильні, яких навчання не цікавить

Навіщо індекс

Самооцінка систематично занижена, тож планувати за нею не можна

В опитуванні є пряме питання про рівень: від 1 до 5. Якщо перевести його в ту саму стобальну шкалу, виявиться, що 19 людей оцінюють себе щонайменше на 20 пунктів нижче, ніж показує їхня власна поведінка. У зворотний бік помиляються лише 5.

Індекс з самооцінкою пов'язаний (кореляція Спірмена 0,74), тобто люди відчувають напрямок правильно. Але систематичний зсув означає, що список «кому потрібне навчання», складений за самооцінкою, буде хибним.

Самооцінка проти індексу: усі, у кого розрив 20+ пунктів

0255075100Р-17 · ПрофітехСамооцінка 1/5Індекс 66Р-51 · СінерджіСамооцінка 2/5Індекс 73Р-6 · ПрофітехСамооцінка 2/5Індекс 71Р-19 · ПрофітехСамооцінка 1/5Індекс 42Р-22 · СінерджіСамооцінка 3/5Індекс 88Р-18 · ПрофітехСамооцінка 1/5Індекс 35Р-34 · СінерджіСамооцінка 2/5Індекс 56Р-40 · КаскадСамооцінка 3/5Індекс 80Р-32 · КаскадСамооцінка 3/5Індекс 78Р-53 · CSСамооцінка 3/5Індекс 78Р-36 · ЮрентСамооцінка 2/5Індекс 53Р-15 · ПрофітехСамооцінка 2/5Індекс 50Р-20 · КаскадСамооцінка 4/5Індекс 100Р-31 · КаскадСамооцінка 3/5Індекс 74Р-2 · CSСамооцінка 3/5Індекс 73Р-41 · КаскадСамооцінка 2/5Індекс 47Р-44 · CSСамооцінка 2/5Індекс 47Р-3 · CSСамооцінка 4/5Індекс 96Р-50 · CSСамооцінка 2/5Індекс 45Р-37 · ПрофітехСамооцінка 3/5Індекс 29Р-45 · СінерджіСамооцінка 4/5Індекс 54Р-52 · СінерджіСамооцінка 4/5Індекс 41Р-38 · CSСамооцінка 5/5Індекс 65Р-24 · КаскадСамооцінка 3/5Індекс 2

самооцінка, переведена в 100 балівіндекс: недооцінюють себеіндекс: переоцінюють

Два крайні випадки пояснюють, чому це важливо. Р-17 ставить собі 1 бал і при цьому щодня використовує ШІ для чотирьох типів задач, включно з таблицями та презентаціями: реальний індекс 67. А Р-20 з ядра клубу поставив собі 4 при індексі 100, найвищому в компанії.

З іншого боку, Р-24 оцінює себе на 3, хоча в тому ж опитуванні відповідає, що ШІ не використовує. Це не обман, а різні уявлення про те, що означає «користуватися».

Практичний наслідок: питання «оцініть свій рівень» варто лишити в анкеті для порівняння, але групи на навчання формувати за індексом. Інакше половина сильних людей потрапить у групу для початківців і піде з неї.

Як влаштований прилад

П'ять компонентів поведінки, жодного балу за самовідчуття

Індекс складається з п'яти вимірів. Кожен нормалізується до 100 балів, потім зважується. Ваги підібрані так, щоб глибина задач важила більше за кількість сервісів: людина, яка щодня будує з ШІ аналітику, зріліша за ту, що відкрила сім чатів для пошуку інформації.

25

Регулярність

Від «не використовую» до «щодня».

30

Глибина задач

Найскладніший тип задач: від пошуку до автоматизації.

15

Широта задач

Скільки різних типів задач людина довіряє ШІ.

15

Репертуар сервісів

Скільки інструментів людина пробувала в роботі.

15

Відчутний ефект

Скільки ефектів людина реально помітила.

Готовність вчитися рахується окремо і в індекс не входить. Це друга вісь: згода виконувати практичні завдання (50), інтерес до активної групи (30) і наявність конкретного запиту на навички з поправкою на блокуючі установки на кшталт «не бачу задач» або «не довіряю відповідям» (20).

Дві осі окремо — принципово. Зрілість каже, що людина вміє. Готовність каже, чи спрацює з нею навчання. Це різні речі, і саме їх зазвичай змішують.

Калібрування

П'ять рівнів, описаних тим, що люди на них справді роблять

Щоб бал щось означав, кожен діапазон описано поведінкою реальних людей, які в нього потрапили. Шкала виявилася монотонною: жодна група не випадає з логіки, а автоматизація з'являється тільки вище 60 балів.

0–206 осіб

Поза радаром

Не використовує або відкрив кілька разів. ШІ поки не є частиною роботи.

  • щодня: 0 з 6
  • сервісів у середньому: 1.2
  • типів задач: 0.7
  • дійшли до автоматизації: 0 з 6
21–406 осіб

Перші дотики

Разові звернення до одного сервісу. Ефект відчувають рідко.

  • щодня: 0 з 6
  • сервісів у середньому: 2.0
  • типів задач: 1.7
  • дійшли до автоматизації: 0 з 6
41–6013 осіб

Швидкий помічник

Регулярно, але переважно тексти й пошук. Одна-дві задачі, один сервіс.

  • щодня: 3 з 13
  • сервісів у середньому: 2.5
  • типів задач: 2.7
  • дійшли до автоматизації: 0 з 13
61–8016 осіб

Щоденний інструмент

Кілька типів задач, кілька сервісів, стабільний ефект. Складніші задачі ще не пробували.

  • щодня: 8 з 16
  • сервісів у середньому: 4.6
  • типів задач: 4.6
  • дійшли до автоматизації: 3 з 16
81–10012 осіб

Оператор процесів

Щодня, багато типів задач, включно з аналітикою чи автоматизацією.

  • щодня: 12 з 12
  • сервісів у середньому: 5.7
  • типів задач: 7.7
  • дійшли до автоматизації: 11 з 12

Найбільша група — «Щоденний інструмент», 16 людей. Це і є головна ціль наступного року: перевести їх у «Оператора процесів». Вони вже щодня працюють з ШІ, їм не потрібно долати вхідний бар'єр, потрібен лише наступний тип задач.

Профілі компаній

Однаковий бал може складатися з різних дір

Профітех і Сінерджі відрізняються за індексом на один пункт. Але структура балу в них різна, і тому їм потрібні різні речі. Вертикальна риска показує середнє по всій компанії.

CS

69індекс
Регулярність 87
Глибина задач 68
Широта задач 49
Репертуар сервісів 64
Відчутний ефект 67

Сильна регулярність і глибина. Найменше провисає широта: люди щодня роблять з ШІ одне й те саме.

Профітех

63індекс
Регулярність 84
Глибина задач 56
Широта задач 51
Репертуар сервісів 66
Відчутний ефект 54

Регулярність майже як у CS, але глибина на 12 пунктів нижча. Класичний профіль «часто, але неглибоко».

Сінерджі

63індекс
Регулярність 70
Глибина задач 67
Широта задач 53
Репертуар сервісів 57
Відчутний ефект 57

Найкраща глибина після CS при середній регулярності. Вміють більше, ніж використовують.

Каскад

44індекс
Регулярність 45
Глибина задач 45
Широта задач 42
Репертуар сервісів 42
Відчутний ефект 46

Рівно низький профіль за всіма компонентами. Тут працює не поглиблення, а старт.

Юрент

52індекс
Регулярність 60
Глибина задач 42
Широта задач 42
Репертуар сервісів 61
Відчутний ефект 60

Три відповіді, тож профіль орієнтовний: сервіси пробують, але глибина найнижча.

Чотири квадранти

Кожній групі потрібна інша дія, і лише одній — воркшоп

Двигуни

20 людей · індекс і готовність вище 60

Уже працюють системно і хочуть більше. Сюди входить усе ядро клубу.

Дати не навчання, а зону відповідальності: один процес компанії на людину.

Автономні

8 людей · сильні, але вчитися не хочуть

Навчилися самі й не бачать сенсу в групі. Формально вони «не зацікавлені», хоча за індексом сильніші за середнього учасника клубу.

Просити не вчитися, а показати свій кейс за 15 хвилин.

Резерв

5 людей · готові, але поки слабкі

Саме та група, заради якої зазвичай роблять воркшопи. І вона виявилася найменшою: охочих новачків у компанії всього 5.

Навчання з супроводом. Тут віддача на вкладену годину найвища.

Незалучені

20 людей · найбільша група

Низька зрілість і низька готовність. Добровільне навчання їх не збере, бо вони на нього не запишуться.

Вхід через їхню власну рутину: показати кейс з їхньої функції, а не курс про ШІ.

Звідси головний висновок для планування воркшопу. Якщо оголосити відкритий набір, прийдуть здебільшого Двигуни, і середній індекс компанії майже не зміниться. Рух дають дві інші дії: 5 людей з Резерву провести через навчання і 20 Незалучених зачепити чужим кейсом з їхньої ж функції.

Тест

Порахуйте свій індекс за хвилину

Вісім питань з тим самим формулюванням, що й в опитуванні, тож результат можна порівнювати з поточним заміром. Нічого нікуди не надсилається: усе рахується у вашому браузері.

Тест можна відкрити на воркшопі з телефона, а результат кожен побачить одразу. Для повторного заміру через квартал достатньо, щоб люди назвали свій бал: середній індекс і розподіл по квадрантах рахуються з тих самих п'яти компонентів.

Що з цим робити

Один прилад, три застосування

Формувати групи

Не за бажанням і не за самооцінкою, а за квадрантом. Резерв іде на навчання, Автономні — в автори кейсів, Незалучені отримують кейс зі своєї функції, Двигуни беруть процес.

Міряти ефект навчання

Медіана 65 — це нульовий замір. Через квартал той самий тест показує, чи зросла глибина задач, чи тільки кількість відкритих чатів.

Вести новачків

Нова людина проходить тест на першому тижні й одразу отримує рівень і перший крок замість загального курсу про ШІ.

Найшвидша перевірка приладу: попросити десятьох людей пройти тест і порівняти бал з тим, як їх бачить керівник. Якщо індекс сперечається з керівником частіше, ніж самооцінка, ваги треба переглянути. Вони лежать в Excel-файлі окремими комірками саме для цього.

Методика й обмеження