AI wordt beangstigend goed in het vinden van softwarefouten, volgens een bedrijf dat vroegtijdig toegang kreeg tot het krachtige nieuwe Mythos-model van Anthropic.
Donderdag plaatste Mozilla, de non-profitorganisatie achter de Firefox-webbrowser, een bericht bloggen met details over hoe het werd gebruikt Claude Mythos-preview – een nog niet uitgebracht AI-model van Anthropic – om beveiligingsproblemen bloot te leggen.
Het softwarebedrijf zei dat het AI-model honderden problemen ontdekte, waaronder minstens één die al twintig jaar bestond.
Mozilla heeft 12 bugs beschreven die het heeft opgelost. Eén daarvan, zo staat er, werd ‘jarenlang niet opgemerkt door fuzzers’, de beveiligingstesttools die software proberen kapot te maken.
Over het geheel genomen zei Mozilla dat de AI-ondersteunde inspanning heeft bijgedragen aan het oplossen van 423 beveiligingsbugs die in de aprilversies van Firefox zijn verzonden, waaronder 271 problemen die het bedrijf specifiek aan Claude Mythos Preview heeft gekoppeld.
Dat is een enorme verandering vergeleken met eerdere maandelijkse updates. In januari van dit jaar zegt Mozilla slechts 25 bugfixes te hebben doorgevoerd. Zesenzeventig werden in maart gerepareerd, aldus het bedrijf.
“De modellen zijn veel capabeler geworden”, schreef het bedrijf in de blog.
Eerdere generaties AI-bugrapporten leverden vaak ‘ongewenste fouten’ op, schreef Mozilla. De door AI voorgestelde oplossingen klonken plausibel, maar bleken niet te kloppen.
Het nieuwere systeem zou volgens Mozilla door uitgestrekte browsercodebases kunnen navigeren en diep verborgen fouten kunnen identificeren. Mozilla zei dat de nieuwe generatie modellen een “veel uitgebreidere dekking” mogelijk maakten dan eerdere AI-modellen.
De gerapporteerde mogelijkheden van Mythos hebben het gesloten gehouden voor openbaar gebruik. Antropisch heeft gezegd model is zo krachtig dat het vrijgeven ervan aan de wereld echte nationale veiligheid zou kunnen creëren risico’s op internetcriminaliteit.
Slechts een handvol geselecteerde bedrijven is dus aan het nieuwe model gewend. Mozilla is er één.
Het bedrijf zei dat het van plan is het systeem verder uit te breiden door AI-analyse rechtstreeks in de ontwikkelingspijplijn van Firefox te integreren.
Mozilla reageerde niet onmiddellijk op een verzoek om commentaar van Business Insider.
