Австралија е потресена од скандалот со Делоит откако ревизорската фирма достави извештај до федералната влада кој го состави АИ – и беше полн со грешки. Делоит изјави дека ќе врати дел од 440.000 австралиски долари што ги плати за ревизијата.
Австралискиот оддел за вработување и односи на работното место (DEWR) потврди дека Делоит ќе ја врати последната рата од договорот. Одлуката доаѓа откако сенатор од Лабуристичката партија ја обвини консултантската компанија дека има „проблем со човечката интелигенција“.
Одделот го ангажираше Делоит во декември 2024 година да ја разгледа целната рамка за усогласеност и ИТ системот, кој се користи за автоматизирање на казните во системот за социјална помош доколку барателите на работа не ги исполнат своите обврски.
Последователниот извештај пронајде широко распространети проблеми и првпат беше објавен на 4 јули оваа година. Тој беше повторно поставен на веб-страницата на министерството во октомври, откако Australian Financial Review (AFP) објави во август дека извештајот пронашол голем број грешки, вклучително и недостаток на референци и цитати.
Професорот на Универзитетот во Сиднеј, д-р Кристофер Раџ, кој прв ги посочи грешките, рече дека извештајот содржи „халуцинации“ каде што моделите на вештачка интелигенција би можеле да ги пополнат празнините, погрешно да ги протолкуваат податоците или да се обидат да погодат одговори.
„Наместо само да заменат една халуцинирана лажна референца со нова „вистинска“ референца, тие ги заменија лажните халуцинирани референци и во новата верзија има пет, шест или седум или осум од нив на нивно место“, рече тој.
„Значи, тоа сугерира дека оригиналното тврдење изнесено во телото на извештајот не се базирало на никаков конкретен извор на докази“, рече професорот.
Ажурираниот извештај има „мал број корекции на референците и фуснотите“, но одделот за ревизија соопшти дека немало промени во дадените препораки.
„Делоит спроведе независен преглед и потврди дека некои фусноти и референци се неточни“, рече портпарол на одделот.
Во ажурирана верзија на извештајот, Делоит додаде референца за употребата на вештачка интелигенција во својот додаток. Во него се вели дека дел од извештајот „вклучува употреба на синџир на алатки базиран на модел на генеративна вештачка интелигенција (ВИ) со голем јазик (Azure OpenAI GPT – 4o) лиценциран од DEWR и хостиран на Azure закуп на DEWR“.
Deloitte не ја припиша ВИ на грешките во оригиналниот извештај. Исто така, стоеше зад оригиналните наоди од ревизијата.
„Ажурирањата на никаков начин не влијаат на суштинската содржина, наодите или препораките на извештајот“, се вели во ревидираната верзија.
Портпаролот на Deloitte рече дека „прашањето е решено директно со клиентот“.
Раџ вели дека, и покрај неговите критики, се двоуми да каже дека целиот извештај треба да се „смета за нелегитимен“, бидејќи заклучоците се во согласност со други широко достапни докази.
Сенаторката од Лабуристичката партија, Дебора О’Нил, која беше во истрагата на Сенатот за интегритетот на консултантски фирми, рече дека изгледа како „вештачката интелигенција да е оставена да ја заврши тешката работа“.
„Делоит има проблем со човечката интелигенција. Ова би било смешно да не беше толку тажно. Делумно враќање на парите се чувствува како делумно извинување за лошата работа“, рече таа.
„Секој што сака да ги ангажира овие фирми треба да се праша кој точно ја работи работата за која плаќаат и да ја провери таа експертиза и дали не се користи вештачка интелигенција. Можеби наместо голема консултантска фирма, клиентите би било подобро да се регистрираат на ChatGPT“, додаде таа.
AFR пронајде неколку неточни референци во оригиналниот извештај, вклучувајќи непостоечки извештаи од професори на Универзитетот во Сиднеј и Универзитетот Лунд во Шведска.
Весникот, исто така, објави измислена референца за судска одлука.
