Чернетка з’явилася за хвилину, але менеджер ще десять хвилин перевіряв умови, переписував відповідь і переносив її в робочу систему. Щоб зрозуміти користь ШІ, власнику бізнесу потрібен облік усього цього часу. Важливо також побачити, чи не перейшла робота від виконавця до керівника, який тепер виправляє чужі чернетки.
Нижче — проста схема для вже обраної рутини: наприклад, підготовки відповідей на типові запити про послугу. Вона допоможе вирішити, чи варто продовжувати пробне використання. Усі числа в прикладі вигадані для пояснення розрахунку; Надалі не проводило такого дослідження.
1. Зафіксуйте, що саме порівнюєте
Почніть з однієї одиниці роботи: готової, перевіреної відповіді, яку можна використати. В обох способах мають бути однакові вимоги до точності, повноти й тону. Швидко отриманий текст із пропущеною умовою ще не відповідає цим вимогам.
Виміряйте звичний процес до зміни. Зберіть порівнювані випадки: однаковий тип запиту, схожу складність, тих самих працівників або людей із подібним досвідом. Не залишайте для ШІ лише найпростіші звернення. Якщо потрібна допомога з вибором процесу, почніть із матеріалу про одну робочу задачу.
Заздалегідь запишіть період перевірки, кількість випадків і критерії продовження. Двадцять випадків у нашому прикладі — зручне число для арифметики, а не достатній обсяг для будь-якого бізнесу. Нечасті, але дорогі помилки можуть узагалі не потрапити в таку вибірку.
Британська урядова настанова з оцінювання впливу ШІ радить визначати базові показники ще до впровадження. Наше практичне застосування цієї ідеї — домовитися про спосіб обліку, поки результат ще невідомий.
2. Зробіть один рядок на кожен випадок
У звичайній таблиці достатньо таких полів:
- Номер випадку, дата, спосіб роботи та складність: звичайний чи виняток
- Хвилини на підготовку даних, створення чернетки й перенесення результату
- Хвилини на всі перевірки, включно з повторними
- Хвилини на виправлення, повторні запити до ШІ або повне ручне переписування
- Прийнято з першої перевірки: так чи ні
- Фінальний результат відповідає вимогам: так чи ні; чи довелося повернутися до ручної роботи
- Помилка, її наслідок і причина відхилення, якщо вони були
Для ручного способу заповнюйте ті самі поля. Підсумовуйте час усіх залучених людей: шість хвилин виконавця плюс чотири хвилини керівника дорівнюють десяти людино-хвилинам. Уточнення колеги теж належить до витрат процесу. Не рахуйте один і той самий відрізок одночасно як перевірку і виправлення.
Якщо під час очікування відповіді системи працівник робить іншу роботу, не додавайте цей проміжок до активної праці. Вимушене очікування, коли людина не може переключитися, врахуйте. Загальний строк від запиту до готової відповіді можна вимірювати окремо: він показує швидкість обслуговування.
Окремим рядком поза випадками запишіть налаштування, навчання й підготовку інструкції. Поточне обслуговування процесу додавайте до відповідного періоду. Врахуйте невдалі спроби, перероблення та помилки, знайдені пізніше. Незавершені випадки залишайте видимими з уже витраченим часом; до їх завершення порівняння партій буде попереднім.
3. Порахуйте весь шлях: навчальний приклад
Уявімо дві порівнювані групи по 20 відповідей. Усі вони зрештою пройшли однакову перевірку. Час наведено для всієї групи, у людино-хвилинах.
| Етап | Звичний процес | З допомогою ШІ |
|---|---|---|
| Підготовка, чернетка та перенесення | 240 | 70 |
| Усі перевірки | 48 | 70 |
| Виправлення та ручне переписування | 12 | 40 |
| Разом поточна робота | 300 | 180 |
| Додаткове стартове налаштування і навчання | 0 | 150 |
| Разом для першої групи | 300 | 330 |
Поточна різниця: 300 − 180 = 120 хвилин, або 6 хвилин на відповідь. Це 40% від базових 300 хвилин. Але з урахуванням старту перша група забрала на 30 хвилин більше: 330 − 300 = 30.
Якщо надалі різниця справді залишатиметься шість хвилин на випадок і нових витрат не виникне, 150 хвилин стартової роботи компенсуються після 25 випадків: 150 ÷ 6 = 25. Позитивний часовий баланс почнеться з 26-го. Це умовний розрахунок, який треба перевірити на наступних випадках.
4. Подивіться, якою ціною отримано результат
Додамо до того самого вигаданого прикладу якість. У звичному процесі 18 із 20 відповідей прийнято з першої перевірки: 90%. З допомогою ШІ — 14 із 20: 70%. Ще чотири виправили, дві повністю написали вручну; ця робота вже включена в 40 хвилин перероблення.
Фінально придатними стали 20 із 20 відповідей в обох групах: 100%. Водночас частка повернення до повністю ручної роботи в групі ШІ становить 2 ÷ 20 = 10%. Ці показники відповідають на різні питання: скільки результатів можна прийняти одразу, скільки вдалося довести до потрібного рівня і як часто новий спосіб довелося покинути.
Зберігайте в знаменнику всі випадки відповідної групи. Якщо одну відповідь так і не довели до вимог, фінальний показник дорівнює 19 ÷ 20 = 95%. Прибирати її з таблиці означає приховати невдачу.
Зіставляйте результат із джерелами та погодженими умовами, як у нашому матеріалі про перевірку. Один критичний збій розглядайте окремо, навіть за високої загальної частки прийняття.
5. Розділіть вивільнений час і гроші
Якщо наступна порівнювана група з 20 відповідей теж вивільнить дві години, а витрати часу на запуск уже компенсовано, цей час можна спрямувати на прострочені звернення або складніші замовлення. Якщо зарплата й інші витрати не змінилися, це додатковий робочий ресурс команди. Грошова економія з’явиться лише там, де справді скоротилися виплати, наприклад за понаднормову роботу чи зовнішню обробку. Таке розрізнення використовує й Government Efficiency Framework.
Для власного бюджету окремо врахуйте підписку, використання сервісу, підтримку та запуск. Не віднімайте гривні від хвилин. Якщо оцінюєте час у грошах, застосовуйте вартість години відповідної ролі: перевірка керівника може коштувати інакше, ніж підготовка виконавця. Підписуйте результат як оцінку вартості часу; для фактичної економії потрібне реальне зменшення витрат.
6. Визначте, коли зупинитися
До початку перевірки запишіть власні умови:
- Негайна пауза, якщо порушено межі використання даних або критична помилка пройшла фінальну перевірку
- Повернення до звичного способу, якщо якість нижча за погоджений рівень
- Перегляд процесу, якщо перевірка й перероблення з’їдають очікуваний виграш
- Продовження лише за досягнення заздалегідь обраного мінімуму економії часу та прийнятних витрат
Це практичні правила Надалі, які потрібно пристосувати до своєї задачі. NIST AI RMF рекомендує оцінювання в умовах, подібних до реального використання, та подальше спостереження за системою.
Невеликий пілот дає підставу для наступного рішення. Він не доводить, що саме ШІ спричинив зміну: могли відрізнятися запити, навантаження або досвід працівників. Не перетворюйте 20 випадків на обіцянку річної економії. Повторіть вимірювання на іншій порівнюваній групі й перевіряйте заново після суттєвих змін інструмента чи процесу.
