Спестено време, което часовникът не показва

19.09

време за четене: 3 мин.

Най-често обещаваната полза от изкуствения интелект в ежедневната работа е спестеното време. Проучване, публикувано на 18 септември, го измерва върху 8298 хоспитализирани пациенти и намира нещо неудобно. Лекарите съобщават, че инструментът ги ускорява, а записите на системата показват обратното.

Робот подава на лекарка спретнато напечатан лист, тя се усмихва одобрително, а зад гърба ѝ голям стенен часовник показва стрелки, отместени видимо напред спрямо малкия часовник на китката ѝ

Какво е измерено

Екип от Университета в Маями сравнява два периода в една болница: преди и след въвеждането на инструмент, който сглобява чернова на обобщението при изписване. Мярката е времето от създаването на бележката до подписването ѝ, взето от самите записи на болничната система, а не от анкета.

Между двата периода разлика няма. Средното време е 6,60 срещу 6,28 минути, а стойността, която показва дали разликата е случайна, е далеч от прага. Вътре във втория период обаче, при 2206 случая, картината е друга: когато инструментът е ползван, времето е 9,20 минути срещу 4,93 без него. След изравняване по други фактори това е 32% повече време, а самото заглавие на публикацията казва „по-високо качество, по-дълго документиране".

Отделно 36 лекари попълват анкета. Трийсет и един от тях, тоест 86,1%, се съгласяват, че инструментът подобрява ефикасността им.

Защо спестено време и усетена скорост се разминават

Същото разминаване излиза независимо и на други места. Екип от Станфорд проследява 384 изписвания с друг модел и намира намаление, което не издържа проверката за случайност, при положение че две трети от отзивите съобщават усетена икономия. Авторите го описват като сваляне на умственото натоварване, а не на минутите. Трети екип, в Минесота, стига до същото: обективните минути не се променят значимо, докато възприятието се подобрява силно.

Това не е дребна подробност. Организация, която мери ползата от изкуствен интелект чрез допитване до служителите си, почти сигурно ще получи по-добър резултат от онзи, който дневниците ѝ показват - и ще го получи искрено, без никой да я заблуждава.

Защо числото 32% не е причина

Тук е уговорката, без която числото е подвеждащо. Проучването е наблюдателно, няма произволно разпределение и няма контролна група. Решението дали да се ползва инструментът е на самия лекар, случай по случай, а най-правдоподобното обяснение е, че той посяга към него при по-сложните пациенти, където обобщението и без това отнема повече.

Данните го подсказват. Ако инструментът наистина добавяше близо една трета време, общото време във втория период щеше да се покачи, а то не се покачва. Самите автори пишат, че инструментът „може да увеличи" документирането и че не е „свързан" с промяна - език на съвпадение, не на причина. Статистическият им модел обяснява около една трета от разсейването, тоест две трети остават неописани.

Уместно е и напомнянето, че публикацията е отпреди един ден, още без окончателни страници и без нито едно цитиране от други изследователи.

Какво следва от това за организациите

Практическият извод е за начина на измерване, не за инструмента. Спестено време се доказва със следа в системата, а не с допитване до хората, които го усещат, и разликата между двете е точно онова, което трите проучвания намират. Когато се въвежда AI помощник в рутинна работа, си струва да се определи предварително коя следа ще служи за мярка и да се вземе отчет преди въвеждането. Анкетата остава полезна, но за друго - тя мери умората и удовлетворението, които също имат стойност.

Полезният въпрос не е „спестява ли време", а „къде отива спестеното" и какво точно се подобрява срещу него. В това проучване проверяващите преподаватели оценяват AI черновите като по-качествени и с по-нисък риск от вреда, но по-малко сбити. Размяната е реална и заслужава да бъде наречена със собственото си име, вместо да бъде отчетена като минути.

Заключение

Три независими екипа мерят едно и също разминаване: усещането за ускорение е трайно, а часовникът не го потвърждава. Това не прави инструментите безполезни, а прави анкетата негоден измервателен уред за обещанието, с което се продават.

Помагаме на български организации да определят какво точно ще мерят, преди да въведат AI в ежедневната си работа, и да отличават усетената полза от измеримата. Услугите ни покриват одит, оценка на готовност, обучение на екипи и имплементация на специализирани AI автоматизации за всяка организация. Препоръчваме консултация при въвеждане на помощник в рутинна работа, чийто резултат ще се отчита пред ръководство или пред финансиращ орган. [Свържете се с нас за консултация: academy@razvivai.se]