'Britse overheidstest met M365 Copilot toont geen productiviteitsverbetering'
Een proef van drie maanden bij een Britse overheidsinstantie met Microsofts M365 Copilot heeft geen duidelijke productiviteitswinst opgeleverd. De AI-assistent bleek weliswaar nuttig voor eenvoudige taken, maar maakte complexere werkzaamheden juist langzamer en de resultaten waren van mindere kwaliteit.
Het Britse Department for Business and Trade (Ministerie van Handel en Economie) testte tussen oktober en december 2024 de AI-tool met duizend licenties, waarvan de data van driehonderd deelnemers werden geanalyseerd. Hoewel 72 procent van de gebruikers tevreden was en teleurgesteld reageerde toen de proef eindigde, bleek de werkelijke impact op de productiviteit beperkt zo meldt The Register.
Uit het onderzoek bleek dat het schrijven van e-mails en het samenvatten van vergaderingen sneller en beter gingen met Copilot. Echter, taken zoals data-analyse in Excel en het maken van PowerPoint-presentaties waren juist langzamer en de output was van slechtere kwaliteit dan zonder de AI-hulp.
Het rapport concludeert dat er geen robuust bewijs is dat de tijdsbesparing leidt tot een daadwerkelijke verbetering van de productiviteit. Ook bleek 22 procent van de gebruikers last te hebben van 'hallucinaties', oftewel door de AI verzonnen of incorrecte informatie. Dit roept vragen op over de kosteneffectiviteit van de software, gezien de hoge licentiekosten.
Dutch IT events
Alle events
