Sors: Digital Times, reporter Gu Bon-gyu
Ċitazzjoni sħiħa tal-artiklu “Startup tal-IA CLEVI tidħol fl-aqwa 2.5% tal-GAIA… turi kredibbiltà vvalidata”
Data tal-pubblikazzjoni 2026-04-08
Link: https://n.news.naver.com/article/029/0003020511?sid=105
Is-startup Koreana tal-IA ‘Clevi’ ħabbret li, wara li bniet il-mudell proprjetarju tagħha u s-soluzzjoni tal-aġent tagħha stess from scratch, daħlet għall-ewwel darba fil-Korea fl-aqwa 2.5% tal-benchmark GAIA, fost 3,090 mudell irreġistrat b’kollox.
Skont spjegazzjonijiet mill-industrija, GAIA, iddisinjat minn Meta AI u operat minn Hugging Face, ma tittestjax biss il-kapaċità tal-IA li “tkun tajba f’ħaġa waħda”, iżda l-kapaċità tagħha li “tgħaqqad diversi kapaċitajiet biex issolvi problemi reali”. Trid issib informazzjoni fuq il-web, taqra tabelli f’PDF, tanalizza immaġini, tħaddem kodiċi biex tagħmel kalkoli, u tgħaqqad ir-riżultati biex tipproduċi tweġiba waħda korretta. L-istruttura, ibbażata fuq 301 mistoqsija mhux pubblika, tliet livelli ta’ diffikultà u l-prinċipju li t-tweġibiet korretti ma jiġux żvelati, tagħmel impossibbli kemm l-overfitting kif ukoll il-qerq.
Biex jinkiseb punteġġ għoli f’dan it-test, hemm bżonn ta’ żewġ affarijiet. L-ewwel hija l-kapaċità ta’ raġunament tal-mudell lingwistiku li jservi bħala l-bażi, u t-tieni hija soluzzjoni ta’ aġent li tgħaqqad dak il-mudell ma’ għodod tad-dinja reali u tippermettilu jwettaq il-kompiti b’mod awtonomu. Ma jimpurtax kemm ikun tajjeb il-mudell, jekk l-aġent ikun dgħajjef ma jistax isolvi l-Level 3; u ma jimpurtax kemm ikun sofistikat l-aġent, jekk il-kapaċità ta’ raġunament tal-mudell tkun insuffiċjenti, it-tweġibiet żbaljati jinfirxu fil-livelli intermedji.
Meta wieħed iħares lejn l-istruttura attwali tal-leaderboard tal-GAIA, jidher mudell interessanti. Il-biċċa l-kbira tal-aġenti fl-ogħla pożizzjonijiet adottaw strateġija ta’ “taħlita ta’ diversi mudelli”, li tgħaqqad diversi mudelli ta’ big tech bħal GPT, Claude u Gemini. Dan huwa approċċ raġonevoli li jgħaqqad il-punti b’saħħithom ta’ kull mudell u jipproteġi kontra tnaqqis fil-punteġġ ikkawżat minn telf ta’ informazzjoni u fatturi simili.
Min-naħa l-oħra, Clevi ma ngħaqditx ma’ dik il-folla. cip-5.5-agent (AI aġentika), żviluppat using from scratch, iwettaq b’mod awtonomu l-ippjanar, l-eżekuzzjoni u l-verifika ta’ kompiti kumplessi, filwaqt li cip-5.5-mm (multimodali universali ta’ prestazzjoni għolja) jifhem u jirraġuna fuq diversi formati ta’ fajls, inklużi l-awdjo, l-immaġini u l-vidjo. Dawn iż-żewġ mudelli ġew żviluppati b’mod indipendenti fi ħdan Clevi, u ma ntuża l-ebda API estern ta’ LLM.
U b’dan l-istack ta’ mudelli proprjetarji, ippreżentat 5 aġenti fil-GAIA, li kollha kisbu aktar minn 70 punt. Minn 79.07% fl-ogħla riżultat sa 70.76%, dan wera l-istabbiltà tal-istack kollu, mhux biss xortih f’riżultat wieħed.
Skont l-ispjegazzjoni tal-kumpanija, wara l-punteġġ uffiċjali ta’ 79.07% hemm numru ieħor. Ir-reviżjoni interna ta’ wara minn CLEVI sabet li, fost it-301 mistoqsija, kien hemm numru konsiderevoli ta’ mistoqsijiet li għalihom il-bażi għall-verifika tat-tweġiba kienet sparixxiet mill-web pubbliku attwali. Meta ġiet evalwata mill-ġdid biss fuq il-bażi tal-mistoqsijiet li għalihom it-tweġiba korretta għadha teżisti fuq il-web, ir-rata ta’ tweġibiet korretti ta’ CLEVI kienet aktar minn 98%. Dan huwa riżultat li diġà jaqbeż il-medja umana ta’ 92%.
Naturalment, kieku tħalltu mudelli ġenerali b’saħħithom ta’ kumpaniji oħra, il-punteġġ uffiċjali seta’ jiżdied aktar. Madankollu, CLEVI deliberatament ma għażlitx dik l-istrateġija. Dan għaliex l-għan ta’ dan il-benchmark ma kienx kompetizzjoni għall-ogħla punteġġ, iżda li jiġi vverifikat jekk mudell proprjetarju from scratch laħaqx livell kompetittiv fix-xena globali.
Il-fatt li isem jidher fuq il-leaderboard tal-GAIA għandu sinifikat kbir, peress li jfisser li kiseb kredibbiltà verifikata mogħtija minn evalwazzjoni indipendenti ta’ parti terza. Dan isir evidenza oġġettiva li tista’ tintuża f’kull fażi, mill-ġbir tal-investiment għall-espansjoni internazzjonali u l-bejgħ B2B.
Rappreżentant ta’ CLEVI qal: “Minn fost it-63 tweġiba żbaljata uffiċjali, numru kbir oriġina minn nuqqas ta’ qbil fil-format tal-output, żbalji fl-interpretazzjoni ta’ materjal viżiv, u mistoqsijiet li ma setgħux jitwieġbu minħabba t-telf tal-informazzjoni. Din hija aktar kwistjoni ta’ preċiżjoni fil-postproċessar u ta’ disponibbiltà tal-informazzjoni esterna milli limitazzjoni fundamentali fir-raġunament loġiku. Peress li huwa mudell proprjetarju, CLEVI tista’ ttejjeb lilha nnifisha. Dan huwa eżattament il-vantaġġ strutturali ta’ mudell proprjetarju from scratch. Il-kisba ta’ CLEVI din id-darba tqajjem mistoqsija lill-industrija tal-AI Koreana: ‘Kemm se ndumu niddependu fuq “imħuħ mislufa”?’ CLEVI għażlet it-triq aktar diffiċli ta’ from scratch u trid tipprova t-tweġiba tagħha fix-xena dinjija.”