1. Daangaa Catastrophic Forgetting fi RAG
Yeroo AI hojii dhugaa keessatti hojiirra oolu, yaaddoowwan gurguddoo keessaa tokko yeroo beekumsa duraan barate deetaa haaraan sirreessanii leenjisanitti mul’atuu dagachuu balaa qabu (Catastrophic Forgetting) dha.
Kunis adeemsa AI’n neetworkii niwuroonii irratti hundaa’e odeeffannoo haaraa ittiin baratu keessatti, beekumsa ykn fakkiiwwan duraan barate saffisaan dhabuu isaati.
Fakkeenyaaf, LLM madda banaa tokko deetaa dhaabbata murtaa’eetiin sirreessanii yoo leenjisan, beekumsi waliigalaa ykn dandeettiin afaanii hir’achuu danda’a.
Rakkoo kana irraa fagaachuuf teknooloojii RAG(Retrieval-Augmented Generation) bal’inaan itti fayyadamaa jiru; ta’us, RAG’nis daangaa qaba.
Daangaawwan beekamoo RAG
- Hima sirreeffame irratti daataa qindaa’e gahaan hin hojjetamu (Structured Data QA): Sirni RAG irra caalaa galmeewwan barruu hin qindaa’in irratti qophaa’eera; kanaaf hiikaa fi walitti dhufeenya daataa qindaa’e (teebilii, kuusdeetaa, faayilii ispiireedshii fi kkf) sirriitti hubachuu ykn itti fayyadamuu hin danda’u.
- Daangaa PDF walxaxaa/galmeewwan hin qindaa’in (Complex PDFs): Galmeewwan PDF walxaxaa (teebilii, tarreewwan hedduu, suuraa fi kkf of keessaa qaban) adeemsa chunking (qooduu) keessatti odeeffannoon badee ykn haalli isaa jallachuu danda’a. Kana irraa kan ka’e daataan barbaachisaan indeeksii keessa galuu dhiisuu ykn barbaaduun rakkisaa ta’uu danda’a.
- Moodaalii Fallback (deeggarsaa) dhabuu (Fallback Model(s)): Yeroo sirni RAG deebii sirrii hin arganne, gara moodela bakka bu’aa (deeggarsaa)tti ce’uuf loojikiin jiru gahaa ykn bu’a qabeessa miti. Kanaaf yeroo deebiin hin milkoofne fayyadamaaf filannoon isa qu 만족시키u hin dhiyaatu.
- Hanqina nageenyaa (LLM Security): Saaxilamummaa nageenyaa LLM mataa isaa (prompt injection, dhangala’uu daataa fi kkf) irraa ittisuun gahaa waan hin taaneef, odeeffannoon miira qabeessa ta’e saaxilamuu danda’a.
- Dandeettii babal’achuu dhabuu (Data Ingestion Scalability): Adeemsa indeeksii fi kuusaa daataa baay’ee guddaa keessatti rakkoon dandeettii babal’achuu uumama. Daataan yeroo baay’atu saffisni chunking, kuusaa fi barbaachaa gadi bu’a; fe’iinsi sirnichaa immoo dabala.
- Odeeffannoo barbaachisaa dhabuu (Missing Content): Yeroo baay’ee qabiyyeen barbaachisaan galmee keessaa adeemsa chunking keessatti badaa ykn indeeksii keessa galuu dhiisa. Kanaaf fayyadamaan odeeffannoo barbaadu barbaaduu hin danda’u.
- Sadarkaa gubbaa dhabuu (Missed Top Ranked): Bu’aa barbaachaa keessatti chunk dhugumaan walqabataa ta’e (sadarkaa gubbaa) hafuu danda’a. Sababoonni isaa daangaa algoriizimii barbaachaa, qulqullina embedding gadi bu’uu fi dogoggora sadarkaa kennuu fa’i.
- Walsimsiisummaa haalaa dhabuu (Not in Context): Yeroo baay’ee chunk barbaadame haala gaaffii dhugaa waliin hin walsimu. Kun daangaa barbaacha wal-fakkeenya salphaa irratti hundaa’e irraa kan ka’e walitti dhufeenyi hiikaa gahaa hin jiru.
- Dogoggora foormaat daataa (Wrong Format): Foormaatni chunk barbaadamee LLM’n ittiin hojjechuuf mijataa ta’uu dhiisuu ykn foormaaticha deebii fayyadamaan barbaadu irraa adda ta’uu danda’a. Fakkeenyaaf, yeroo teebiliin gara barruutti jijjiiramu odeeffannoon jallachuu danda’a.
- Odeeffannoo baasuu irratti kufuu (Not Extracted): Odeeffannoon barbaachisaan chunk keessaa sirriitti hin baafamne ykn LLM’n odeeffannoo sana adda baasuu hin dandeenye ta’uu danda’a. Kun caasaa himaa walxaxaa, teebilii fi suuraa keessatti yeroo baay’ee mul’ata.
- Bal’ina/ gadi-fageenya odeeffannoo sirrii hin taane (Incorrect Specificity): Deebiin gaaffiif baay’ee waliigalaa ykn faallaa isaa baay’ee addaa ta’ee, fedhii dhugaa fayyadamaa waliin kan hin walsimne ta’uu danda’a. Daangaa fi gadi-fageenya odeeffannoo sirreessuun rakkisaadha.
- Deebii guutuu hin taane (Incomplete): Deebiin dhuma irratti uumame guutuu ta’uu dhiisuu ykn odeeffannoo muraasa qofa kennuun fedhii fayyadamaa gahaa guutuu dhabuu danda’a. Sababoonni isaa odeeffannoo chunk hedduu irraa walitti qabuun dadhabuu ykn LLM’n odeeffannoo keessaa muraasa qofa fayyadamuudha.
Akkuma kanaan, RAG barbaacha walfakkeenya veektarii salphaa fi indekseessuu chunk irratti baayʼee waan hirkatuuf, hojii dhugaa keessatti gama amanamummaa, balʼina fi sirrii taʼeen daangaan isaa ifaadha.
2. Kuusdeetaa semaantikii CLEVI kan daangaa RAG moʼe
CLEVI daangaa kana moʼuuf, bu’uura beekumsaa AI dhaloota haaraa kan walitti hidhamiinsa hiikaa, yaada walxaxaa fi deebii ragaa irratti hundaaʼe irratti qophaaʼe, jechuunis Clevi Semantic Database, qopheesseera.
Kun furmaata kan dandaʼameef CLEVI’n moodeelota Reasoning mataa isaa, AI multimodaalii fi moodeelota AI agentii hundaa waan qabuuf; teknooloojiiwwan humna-qabeessa CLEVI keessaa tokko kan AI jireenya dhugaa keessatti dhugumaan faayidaa akka qabaatu taasisuudha.
Fakkeenyaan yoo ilaalle, kuusdeetaan odeeffannoo itti kuufame mana kitaabaa yoo taʼe, kuusdeetaan semaantikii CLEVI mana kitaabaa sana keessatti mana kitaabaa bulchaa baayʼee dandeettii qabu akka jiru yaaduu dandeessa. (Mana kitaabaa bulchaatiin odeeffannoo barbaadde yoo gaafatte, deebii sirrii fi saffisaa argatta.)
Fayyadamaan yeroo barbaadetti mana kitaabaa keessatti odeeffannoo haaraa dabalee, odeeffannoo barbaachisu waamuu dandaʼa.
Akkasumas, bulchiinsa vರ್ಌrsinii daataa fi hayyama itti fayyadamaa akkuma barbaadetti qindeessuu dandaʼa.
Gocha hundi mana kitaabaa bulchaa galmee (log) taʼee waan hafuu, dogoggorri yoo uumames sirreessuun ni dandaʼama.
<Clevi Semantic Database Structure>
Amaloota ijoo fi caasaa teknooloojii
Kuufama daataa semaantikii
- DB veektarii chunk salphaa qofa osoo hin taane, hariiroo hiikaa daataa gidduu jiru (haala, sadarkaa, sababummaa fi kkf) keessatti DB giraafii kuusuu
- Bifa giraafii beekumsaa/network semaantikii taʼeen babalʼisuu fi guutuun salphaa
Barbaacha fi yaada walmakaa
- CTA+Context Query: Haala (Context) gaaffii fi CTA waliin walitti makuun ilaala
- Hybrid Retrieval: Walfakkeenya veektarii + barbaacha seera/giraafii irratti hundaaʼe walitti makuu
- Intelligent Folder Hits: Faayilii/ramaddii hiikaan walitti dhufeenya qaban ofumaan barbaaduu
Daataa multimodaalii yeroo tokkoon adeemsisuu
- TextReader Pool, VisionReader Pool fi kkf barruu, suuraa, gabatee, sagalee fi daataawwan gara garaa yeroo tokkoon hiikuu
- RAG duraanii irra caalaa barruu qofa adeemsisuu dandaʼa; kuusdeetaan semaantikii garuu dandeettii adeemsa multimodaalii olaanaa qaba
Deebii ragaa irratti hundaaʼe fi mirkaneessa amanamummaa
- Cuunfaa Dokumentii fi Madda: Cuunfaa dokumentii fi maddoota ofumaan uumuu, akkasumas argannoo gabatee
- Walitti Makuu fi Mirkaneessuu: Odeeffannoo maddoota hedduu irraa dhufe hiikaan walitti makuu fi amanamummaa isaa mirkaneessuu
- Paakeejii Ragaa: Deebii ragaa irratti hundaa’e dhiyeessuu
Xiinxala walxaxaa fi karoorsaa
- Planner/DAG: Gaaffilee walxaxaa irratti hundaa’uun karoora sadarkaa sadarkaanii fi xiinxala DAG (Directed Acyclic Graph) irratti hundaa’e gaggeessuu
Caaseffama ejentii walitti makame
- cip-5-agent Supervisor: Adeemsa barbaacha, xiinxalaa fi walitti makuu guutuu too’atuu fi qindeessu ejentii olaanaa
3. Cuunfaa fi walbira qabuu caasaa
Walumaagalatti, Semantic DB daataa bifa gara garaatiin (sagalee, barruu, suuraa, viidiyoo fi kkf) fudhatee, Chunk salphaa qofa osoo hin taane, hariiroo hiikaa daataa gidduu jiru (haala, sadarkaa, sababaa fi kkf) walqabsiisuun beekumsa ramada.
Kana irratti hundaa’uun, akka RAG keessatti ta’uutti barbaacha furtuuwwanii ykn walfakkeenya irratti hundaa’e osoo hin taane, barbaachaa fi xiinxala walitti dhufeenya hiikaa fayyadamu gaggeessa; kanaaf AI irraa odeeffannoo sirrii fi deebii sirrii caalaa argachuu dandeenya.
Dabalataanis, bifa giraafii beekumsaa ykn neetworkii semantikaa tiin waan kuufamuuf, itti fufiinsaan babal’isuu fi guutuun isaa salphaa dha.
Nuti CLEVI, bara jijjiirama guddaa AI keessatti, daangaa sirna RAG arginee, kuusdeetaa semantikaa fi moodeela AI mataa keenyaa kan rakkoo kana furuun, maamiltootaaf daataa sirrii fi amanamummaa qabu saffisaan deebisuu dandeenyeerra.
Sirni AI keenya naannoo kamiyyuu keessatti, gosa dominii irraa bilisa ta’uun, daataa qaalii maamiltootaa gara gatii qabutti jijjiiruu danda’a.
Gara fuulduraattis, CLEVI gatii daataa maamiltootaa qabu guddisuu fi muuxannoo AI kalaqaa dhiyeessuuf carraaqqii isaa guutuun itti fufa.
CLEVI waliin gara fuulduraa AI haaraa muuxachuuf isin affeerra.
Gaaffii fi agarsiisa gaafachuuf: [email protected]
Copyright© 2025 Clevi Inc. All rights reserved.