In september 2024 ondervroeg modl.ai 303 ontwikkelaars in de Verenigde Staten om de huidige status van Quality Assurance (QA) in gameontwikkeling te onderzoeken. De deelnemers vertegenwoordigden een breed scala aan achtergronden en studiogroottes, wat een divers beeld geeft van hoe QA binnen de industrie evolueert.
De status van QA in gameontwikkeling
Uit het onderzoek blijkt dat 94 percent van de ontwikkelaars een vorm van QA-automatisering in hun workflows heeft geïmplementeerd. Deze implementaties bevatten echter nog geen oplossingen op basis van kunstmatige intelligentie. Onder degenen die automatisering gebruiken, gaf 39 percent aan dat meer dan de helft van hun QA-processen geautomatiseerd is, wat wijst op een significante verschuiving naar efficiëntie en schaalbaarheid in testmethoden.
Ondanks deze vooruitgang blijft het leveren van volledig bugvrije games een uitdaging. Meer dan 70 percent van de ontwikkelaars erkende dat ze nog nooit een game zonder bugs hebben uitgebracht. De overige ontwikkelaars hadden ook moeite om voor de release volledige QA-dekking te bereiken. Slechts 23 percent van de respondenten verklaarde dat al het noodzakelijke QA-werk vóór de lancering was voltooid, wat wijst op aanhoudende druk zoals strakke deadlines en beperkte middelen.
Daarnaast was de helft van de ondervraagde ontwikkelaars het er niet mee eens of was onzeker of de QA-budgetten gelijke tred houden met de marktvraag. Dit suggereert een gebrek aan afstemming tussen de complexiteit van moderne gameontwikkeling en de middelen die worden toegewezen om de productkwaliteit te waarborgen.
Hoe belangrijk is AI in de toekomst van QA
Betaal minder voor je games.
Bespaar tot wel 80%
Percepties van kunstmatige intelligentie in QA
Het onderzoek verkende ook de sentimenten van ontwikkelaars over de rol van kunstmatige intelligentie in QA. Een grote meerderheid—94 percent—gelooft dat AI een belangrijke rol zal spelen in toekomstige QA-processen. Ontwikkelaars identificeerden verschillende potentiële voordelen, waaronder het sneller detecteren van bugs, het automatisch rapporteren van issues en de mogelijkheid om continu tests uit te voeren zonder menselijke tussenkomst.
In totaal gaf 65 percent van de respondenten aan te geloven dat AI effectiever is in het identificeren van bugs dan traditionele methoden. Bovendien verwacht 86 percent dat AI de snelheid van QA-testen na verloop van tijd zal verhogen. Deze bevindingen wijzen op een sterk optimisme over het potentieel van AI om de betrouwbaarheid en efficiëntie van gametesten te verbeteren.
Belangrijkste redenen waarom je AI-gegenereerde resultaten in QA niet vertrouwt
Industriële paraatheid en vertrouwen in AI
Ondanks het wijdverbreide geloof in de toekomstige rol van AI, variëren de meningen over de huidige paraatheid en het niveau van vertrouwen. De data laat zien dat 87 percent van de studio's zich voorbereid voelt om AI op te nemen in hun QA-processen. Meer dan de helft, oftewel 55 percent, verwacht dat het gebruik van AI op termijn zal leiden tot lagere QA-kosten.
Het vertrouwen in AI-gegenereerde resultaten blijft echter laag. Slechts 16 percent van de ontwikkelaars rapporteerde volledig vertrouwen in AI-uitkomsten, terwijl 10 percent helemaal geen vertrouwen uitsprak. Ontwikkelaars noemden verschillende zorgen, waaronder het gebrek aan menselijke intuïtie, de mogelijkheid van onnauwkeurige bevindingen en inconsistente resultaten tussen verschillende AI-systemen.
Desalniettemin groeit de interesse in AI-integratie. Meer dan de helft van de respondenten gaf aan interesse te hebben in het werken bij studio's die AI gebruiken voor QA-taken, wat wijst op een verschuiving in de houding van ontwikkelaars ten opzichte van nieuwe technologieën.
Hoe effectief vind je dat AI is in het identificeren van bugs?
Uitdagingen voor AI-adoptie
Hoewel de potentiële voordelen van AI breed worden erkend, blijft de adoptie beperkt vanwege verschillende uitdagingen. Ontwikkelaars wezen op de complexiteit van het opzetten van AI-systemen, de hoge initiële kosten en interne weerstand binnen teams. Deze factoren dragen bij aan een tragere integratie, ondanks de algehele paraatheid en interesse.
Het rapport van modl.ai biedt inzicht in hoe gameontwikkelaars QA benaderen in het huidige landschap. Het benadrukt de groeiende rol van automatisering en de opkomende interesse in AI, terwijl het ook de obstakels erkent die moeten worden aangepakt voordat grootschalige adoptie kan plaatsvinden. Naarmate de industrie blijft evolueren, kan de integratie van AI in QA-praktijken levensvatbaarder worden, waardoor ontwikkelaars beter kunnen voldoen aan de toenemende eisen voor kwaliteit en efficiëntie in gameproductie.
Bron: modl.ai
