OpenAI har offentliggjort et omfattende materiale med matematiske resultater som selskapet mener løser flere problemer som lenge har stått åpne. De 722 manuskriptene er organisert i 372 «resultatfamilier» – grupper med innbyrdes beslektede studier.

Publiseringen er det nyeste eksempelet på kunstig intelligens som gjør fremskritt innen matematikk. Utviklingen har både overrasket deler av fagmiljøet og skapt bekymring hos andre. Spørsmålene handler ikke bare om hvor mye systemene faktisk er i stand til, men også om forskningsetikk og akademisk praksis.

Skal ha løst hundrevis av åpne spørsmål

Den uavhengige rådgivningsgruppen AGMAI, som består av ledende matematikere, opplyser at materialet inneholder løsninger på «hundrevis» av åpne spørsmål. Resultatene har vært ventet i flere uker. Frem til nå hadde OpenAI ikke opplyst hvilke problemer modellen skulle ha løst, eller når materialet ville bli publisert.

I september opplyste selskapet at modellen hadde «løst mer enn 100 langvarige, uløste problemer innen de fleste matematiske fagområder». De publiserte studiene og tilhørende data inneholder også enkelte sammendrag av modellens resonnering, anslag over datakraften som er brukt, og statistikk over hvor mange problemer modellen forsøkte å løse.

OpenAI hevder at det i gjennomsnitt ble brukt datakraft tilsvarende omtrent tre timers resonnering med ChatGPT Pro for å oppnå ett «gjennomsnittsresultat». Formuleringen beskriver ressursbruken, ikke nødvendigvis kvaliteten eller betydningen av hvert enkelt resultat.

Ber om åpenhet rundt modeller og kostnader

AGMAI, eller rådgivningsgruppen for matematikk og kunstig intelligens, publiserte sine første anbefalinger mot slutten av september. Gruppen ba AI-laboratorier offentliggjøre matematiske resultater umiddelbart og, når det er mulig, bruke etablerte kanaler for akademisk publisering.

Rådgiverne anbefalte også at selskapene oppgir hvilken modell som er brukt, hvilke instruksjoner eller «prompter» den har fått, og hvor store beregningskostnadene har vært. Samtidig ba AGMAI selskapene om å «avstå fra å bruke publisering av matematiske resultater som et markedsføringsverktøy for å promotere modellene sine». Gruppen mener slik praksis påfører matematikkmiljøet betydelig skade.

OpenAI har publisert resultatene i et GitHub-repositorium. Der er det lagt opp til protokoller for rettelser og referanser til manuskriptene. Selskapet ønsker også å rådføre seg med ledende matematikere om hvordan det kan unngå feil ved offentliggjøringen av tilsvarende resultater i fremtiden.