Google-ийн хуучин инженер, хиймэл оюуны судлаач Француа Шолле "хүний түвшний" оюун ухааныг үнэлэх стандартыг боловсруулах зорилготой ашгийн бус ARC Prize санг хамтран үүсгэн байгуулж байна. Уг санг Salesforce-ийн инженерийн захирал асан бөгөөд AI бүтээгдэхүүний студи Leverage-ийн үүсгэн байгуулагч Грег Камрадт удирдах бөгөөд тэрээр ерөнхийлөгч болон зөвлөлийн гишүүнээр ажиллана. Шолле тус сангийн зорилгыг хиймэл ерөнхий оюун ухаан (AGI) руу чиглэсэн замын "умардын од" гэж тодорхойлсон. Энэ нь AI нь хүний адил ихэнхи ажлуудыг гүйцэтгэх чадвартай байхад оршино. ARC Prize сан ARC-AGI дээр суурилна, энэ нь Шоллегийн бүтээсэн тест бөгөөд AI систем шинэ ур чадварыг сургалтын өгөгдлөөс гадуур суралцах эсэхийг үнэлнэ. Энэ нь өнгөт квадратаас зөв хариу өгөх "хариу" бүтээлийг гаргах даалгавар хийх чадварыг шалгах зорилготой. ARC-AGI буюу "Хийц болон утга санааны корпус хиймэл ерөнхий оюун ухаанд зориулсан" хэмээх уг шалгалт нь 2019 онд нэвтрүүлэгдэж, AI систем Математикийн олимпиад гэх мэт салбарт амжилт гаргадаг боловч ARC-AGI даалгаваруудыг гүйцэтгэхдээ хүндрэлтэй байгааг харуулсан. Хамгийн сайн үр дүнтэй системүүд нь саяхныг хүртэл гуравны нэгээс бага хэсгийг нь шийдвэрлэсэн байна. Шолле онцлон хэлэхдээ ердийн AI стандартууд хүний хэт өрсөлдөх чадварт төвлөрдөг бол ирээдүйн ARC-AGI хувилбарууд AI болон хүний чадваруудын хоорондох ялгааг арилгах зорилготой гэв.

Өнгөрсөн зургадугаар сард ARC-AGI-г давж чадах AI хөгжүүлэх тэмцээн эхэлсэн бөгөөд OpenAI-ийн гаргаагүй o3 загвар нь хангалттай оноонд хүрсэн, гэхдээ нүсэр тооцооллын нөөц шаардсан. Шолле ARC-AGI-ийн сул талуудыг хүлээн зөвшөөрдөг бөгөөд o3-ийн хүний түвшний оюун ухаанд эргэлздэг. Арван хоёрдугаар сард Шолле шинэ стандартууд o3-г сорилтод оруулж, түүний оноог магадгүй бууруулах боломжтой бөгөөд хүмүүст сургалтгүйгээр 95%-иас дээш гүйцэтгэх боломжтой хэвээр байхыг таамагласан. Тэрээр AGI нь хараахан боломжгүй болох үед хүний хувьд хялбар, AI-д хэцүү даалгавруудыг бий болгох боломжгүй болно гэж үзэж байна. Кнооп энэ жил хоёрдахь үеийн ARC-AGI стандартыг эхлүүлж, шинэ тэмцээн явуулах, гурав дахь хувилбарыг боловсруулах төлөвлөгөөг зарласан. Тус сан AGI-ийн замналд ARC-AGI-ийн үүрэг хэтрүүлэгтэй байсан эсэх талаар эргэлзээтэй тулгарч байгаа бөгөөд AGI-ийн тодорхойлолтын талаар маргаан өрнөж байгаа. Саяхан OpenAI-ийн гишүүн AGI аль хэдийн оршин байгаа, хэрвээ AI ихэнх хүмүүстэй харьцуулахад ихэнх ажлуудыг давуу хийдэг гэж тодорхойлсон бол гэж мэдэгдсэн. OpenAI-ийн захирал Сэм Альтман арван хоёрдугаар сард ARC-AGI-тай ирээдүйн стандартууд дээр хамтран ажиллах төлөвлөгөөтэй байгаагаа дурдсан боловч Шолле сүүлд хийсэн зарлалдаа аливаа түншлэлийг батлаагүй байна.