admin 
Buvęs „Google“ inžinierius ir įtakingas dirbtinio intelekto tyrinėtojas François Chollet įkūrė ne pelno siekiančią organizaciją, kuri padėtų sukurti etalonus, kurie ištirs AI „žmogaus lygio“ intelektą.
Ne pelno siekiančiai organizacijai „ARC Prize Foundation“ vadovaus Gregas Kamradtas, buvęs „Salesforce“ inžinerijos direktorius ir AI produktų studijos „Leverage“ įkūrėjas. Kamradtas eis prezidento ir valdybos nario pareigas.
„(Mes) augame… į tinkamą ne pelno fondą, kuris veiktų kaip naudinga šiaurinė žvaigždė dirbtinio bendrojo intelekto link“, – rašė Chollet ne pelno organizacijos svetainėje. (Dirbtinis bendrasis intelektas yra miglotas terminas, bet paprastai suprantamas kaip AI, galintis atlikti daugumą žmonių užduočių.) „Stengiamės įkvėpti pažangą skatindami (trūkumą) pagrindinių žmogaus gebėjimų srityje.
ARC prizo fondas išplės ARC-AGI – „Chollet“ sukurtą testą, skirtą įvertinti, ar dirbtinio intelekto sistema gali efektyviai įgyti naujų įgūdžių be duomenų, kuriuos ji mokė. Jį sudaro į galvosūkį panašios problemos, kai AI turi sugeneruoti teisingą „atsakymų“ tinklelį iš skirtingų spalvų kvadratų. Problemos buvo sukurtos siekiant priversti AI prisitaikyti prie naujų problemų, kurių anksčiau nematė.
2019 m. Chollet pristatė ARC-AGI, trumpinį „Abstract and Reasoning Corpus for Artificial General Intelligence“. Daugelis AI sistemų gali išlaikyti matematikos olimpiados egzaminus ir rasti galimus doktorantūros lygio problemų sprendimus. Tačiau iki šių metų geriausiai veikiantis AI galėjo išspręsti tik mažiau nei trečdalį ARC-AGI užduočių.
„Skirtingai nei dauguma paribių AI etalonų, mes nesistengiame išmatuoti AI rizikos su antžmogiškais egzamino klausimais“, – įraše rašė Chollet. „Ateities ARC-AGI etalono versijose daugiausia dėmesio bus skiriama atotrūkio (žmogaus pajėgumų) mažinimui iki nulio.
Praėjusį birželį Chollet ir Zapier įkūrėjas Mike'as Knoopas pradėjo konkursą sukurti dirbtinį intelektą, galintį įveikti ARC-AGI. „OpenAI“ neišleistas o3 modelis buvo pirmasis, kuris gavo kvalifikacinį balą, bet tik su nepaprasta skaičiavimo galia.
Chollet aiškiai pasakė, kad ARC-AGI turi trūkumų – daugelis modelių sugebėjo žiauriai pasiekti aukštų rezultatų – ir kad jis netiki, kad o3 turi žmogaus lygio intelektą.
„Pirmieji duomenų taškai rodo, kad būsimas (ARC-AGI įpėdinis) etalonas vis tiek bus didelis iššūkis o3, galintis sumažinti jo rezultatą iki mažiau nei 30 % net esant dideliam skaičiavimui (nors protingas žmogus vis tiek sugebės gauti daugiau nei 95 % be treniruočių)“, – praėjusį gruodį sakė Chollet. „Sužinosite, kad dirbtinis bendras intelektas yra čia, kai atlikti užduotis, kurios būtų paprastos paprastam žmogui, bet sunkios dirbtiniam intelektui, tampa tiesiog neįmanomos.
Knoop sako, kad šiais metais kartu su nauju konkursu planuojama išleisti antros kartos ARC-AGI etaloną. Ne pelno siekianti organizacija taip pat pradės kurti trečiąjį ARC-AGI leidimą.
Belieka pamatyti, kaip ARC prizo fondas reaguos į kritiką, su kuria Chollet susidūrė dėl ARC-AGI perpardavimo kaip etalono siekiant AGI. Pats AGI apibrėžimas dabar yra karštai ginčijamas; vienas OpenAI darbuotojas neseniai teigė, kad AGI „jau“ pasiektas, jei AGI apibrėžiama kaip AI „geresnis už daugelį žmonių atliekant daugumą užduočių“.
Įdomu tai, kad OpenAI generalinis direktorius Samas Altmanas gruodį sakė, kad bendrovė ketina bendradarbiauti su ARC-AGI komanda, kad sukurtų būsimus etalonus. Šiandienos pranešime Chollet nepateikė informacijos apie galimą partnerystę.
