1. سنووردارییەکانی Catastrophic Forgetting و RAG
کاتێک AI لە کاری ڕاستەقینەدا بەکاردهێنرێت، یەکێک لە گەورەترین نیگەرانییەکان دیاردەی لەبیرکردنەوەی کارەساتبار (Catastrophic Forgetting) ـە کە لە کاتی فاینتیونکردنی زانیارییە فێربووەکانی پێشوو بە داتای نوێدا ڕوودەدات.
ئەمە دیاردەیەکە کە AI ـی بنیاتنراو لەسەر تۆڕی ئەعصاب، لە پرۆسەی فێربوونی زانیارییە نوێکاندا، زانیاری یان شێوازەکانی پێشتر فێربووی بەخێرایی لەدەست دەدات.
بۆ نموونە، ئەگەر LLM ـێکی سەرچاوەکراوە بە داتای تایبەت بە کۆمپانیایەک فاینتیون بکرێت، ئەوا دەکرێت زانیارییە گشتییەکان یان توانای زمانەوانییەکەی لاواز ببێت.
بۆ خۆپاراستن لەم کێشەیە، تەکنەلۆژیای RAG(Retrieval-Augmented Generation) بەربڵاو بەکاردەهێنرێت، بەڵام RAG ـیش سنوورداریی خۆی هەیە.
سنووردارییە سەرەکییەکانی RAG
- Nekarîna rêvebirina daneyên strukturkirî (Structured Data QA): Pergalên RAG bi giranî ji bo belgeyên nivîsara ne-strukturkirî hatine optimîze kirin, ji ber vê yekê nikarin wate û têkiliyên daneyên strukturkirî (tablo, danegeh, tabloyên hesabê û hwd.) bi rêkûpêk fam bikin an bi kar bînin.
- Sînorên PDF û belgeyên ne-strukturkirî yên tevlihev (Complex PDFs): Belgeyên PDF yên tevlihev (dihewandina tablo, çend kolonan, wêneyan û hwd.) dikarin di pêvajoya chunking (parçekirinê) de bibe sedema windabûna agahiyê an berovajîbûna çarçoveyê. Ji ber vê yekê, daneyên girîng dikarin nehatibin indeks kirin an jî bibin dijwar ku werin lêgerîn.
- Nebûna modela Fallback (Fallback Model(s)): Dema ku pergalên RAG nikarin bersiveke guncan bibînin, lojîka veguhastina modela alternatîf (backup) kêm an bêbandor e. Ji ber vê yekê, dema ku bersivek bi ser neket, alternatîfeke ku bikarhêner razî bike nayê pêşkêş kirin.
- Qelsiyên ewlehiyê (LLM Security): Ji ber ku parastina li hember qelsiyên ewlehiyê yên xwecihî yên LLM (wek prompt injection û derketina daneyan) kêm e, metirsiya eşkerekirina agahiyên hesas heye.
- Kêmbûna berfirehbûnê (Data Ingestion Scalability): Di pêvajoya indeksandin û hilanîna daneyên mezin de pirsgirêkên berfirehbûnê derdikevin holê. Her ku dane zêde dibin, leza chunking, hilanîn û lêgerînê kêm dibe û barê pergalê zêde dibe.
- Windabûna agahiyên girîng (Missing Content): Gelek caran naveroka girîng ya belgeyê di pêvajoya chunking de winda dibe an nayê indeks kirin. Ji ber vê yekê, bikarhêner nikare agahiya ku dixwaze bi lêgerînê bibîne.
- Windabûna rêza jorîn (Missed Top Ranked): Di encamên lêgerînê de, chunk (rêza herî jorîn) ku bi rastî herî têkildar e dikare winda bibe. Sînorên algorîtmayên lêgerînê, kêm bûna kalîteya embeddingê û xeletiyên rêzkirinê ji sedemên vê yekê ne.
- Nelihevhatina çarçoveyê (Not in Context): Gelek caran chunka lêgerînê bi çarçoveya rastîn a pirsê re li hev nayê. Ji ber sînorên lêgerîna bingehê li ser wekheviyê tenê, girêdana wateyî kêm e.
- Xeletiya formatê (Wrong Format): Forma chunka lêgerînê dikare ji bo ku LLM wê bixebitîne ne guncan be an ji formata bersiva ku bikarhêner dixwaze cuda be. Mînakî, tablo dikare bibe nivîs û agahî berovajî bike.
- Serneketina derxistina agahiyê (Not Extracted): Agahiya pêwîst dikare ji chunkê bi rêkûpêk neyê derxistin an LLM nikare agahiyê nas bike. Ev pir caran di avahiyên hevokên tevlihev, tablo û wêneyan de çêdibe.
- Nekêmasiya berfirehiya/ kûrahiya agahiyê (Incorrect Specificity): Bersiv dikare ji bo pirsê pir giştî an berevajî pir taybetî be û bi daxwazên rastîn ên bikarhêner re li hev neke. Kontrolkirina berfirehî û kûrahiya agahiyê dijwar e.
- Bersiva netemam (Incomplete): Bersiva ku di dawiyê de hatiye hilberandin dikare netemam be an tenê hin agahiyan pêşkêş bike, û bi vî awayî daxwazên bikarhêner bi têra xwe pêk neyne. Nekarîna komkirina agahiyê ji gelek chunkan an bikaranîna tenê beşek ji agahiyê ji aliyê LLM ve sedemên vê yekê ne.
بەم شێوەیە، چونکە RAG بە شێوەیەکی زۆر پشت بە گەڕانی هاوشێوەیی ڤێکتەر و ئیندێکسکردنی بنەمای chunk دەبەستێت، لە کاری ڕاستەقینەدا سنووردارییەکانی لە ڕووی متمانەپێکراوی، فراوانبوون و وردییەوە بە ڕوونی دەردەکەون.
2. بنکەدراوەی داتای سیمانتیکی CLEVI کە سنووردارییەکانی RAGی تێپەڕاندووە
CLEVI بۆ تێپەڕاندنی ئەم سنووردارییانە، زیرساختێکی نوێی زانیاریی AI، واتە پەیوەندییە ماناییەکان، لێکدانەوەی ئاڵۆز و وەڵامی پشتبەستوو بە بەڵگە، کە بۆ Clevi Semantic Database باشکراوە، پەرەپێداوە.
ئەم چارەسەرە بەهۆی ئەوەوە دەکرێت کە خۆی مۆدێلی Reasoning، هوشی دەستکردی فرەشێوەیی و مۆدێلی هوشی دەستکردی جۆری ئەجێنتی هەیە، و یەکێکە لە تەکنەلۆژیا بەهێز و تایبەتەکانی CLEVI کە وا دەکات AI لە ژیانی ڕاستەقینەدا بە شێوەیەکی ڕاستەقینە سوودبەخش بێت.
بۆ نموونە، ئەگەر بنکەدراوەیەکی داتا کە زانیارییەکان تێیدا هەڵگیراون بە کتێبخانە دابنێین، بنکەدراوەی داتای سیمانتیکی CLEVI وەک ئەوەیە کتێبخانەکە کتێبخانەوانێکی زۆر لێهاتووی هەبێت. (کاتێک زانیارییە پێویستەکان لە کتێبخانەوانەکە داوا دەکەیت، دەتوانیت وەڵامێکی ورد و خێرا وەربگریت.)
بەکارهێنەر دەتوانێت هەر کاتێک زانیاریی نوێ لە کتێبخانەکە زیاد بکات و زانیاریی پێویست بانگ بکاتەوە.
هەروەها دەتوانێت بەڕێوەبردنی وەشانی داتا و مۆڵەتی دەستگەیشتن بەو شێوەیەی دەیەوێت ڕێکبخات.
هەموو کردارەکانی کتێبخانەوانەکە بە شێوەی لۆگ (تۆمار) هەڵدەگیرێن، بۆیە تەنانەت ئەگەر هەڵەیەک ڕووبدات، دەتوانرێت چاک بکرێتەوە.
<Clevi Semantic Database Structure>
تایبەتمەندییە سەرەکییەکان و پێکهاتەی تەکنیکی
هەڵگرتنی داتای سیمانتیکی
- لەبری chunk وێکتەرDBی سادە، پەیوەندییە ماناییەکانی نێوان داتا (کۆنتێکست، چینبەندی، هۆکار و ئەنجام و هتد) لە گراف DB هەڵدەگیرێن
- فراوانکردن و تەواوکردنی بە شێوەی گرافی زانیاری/تۆڕی سیمانتیکی ئاسانە
گەڕانی هایبرید و لێکدانەوە
- CTA+Context Query: کۆنتێکستی پرسیار (Context) و CTA بەیەکەوە لەبەرچاو دەگرێت
- Hybrid Retrieval: کۆکردنەوەی گەڕانی بنەمای هاوشێوەیی ڤێکتەر + یاسا/گراف
- Intelligent Folder Hits: دۆزینەوەی خۆکارانەی فۆڵدەر/پۆلەبەندییە پەیوەندیدارە ماناییەکان
پرۆسەکردنی هاوکاتی فرەشێوەکان
- TextReader Pool، VisionReader Pool و هتد، لێکدانەوەی هاوکاتی داتا جۆراوجۆرەکان وەک دەق، وێنە، خشتە و دەنگ
- لە کاتێکدا RAGی کۆن بە شێوەیەکی سەرەکی تەنها دەتوانێت دەق پرۆسە بکات، بنکەدراوەی داتای سیمانتیکی لە توانای پرۆسەکردنی فرەشێوەکاندا زۆر بەهێزە
وەڵامی پشتبەستوو بە بەڵگە و پشتڕاستکردنەوەی متمانەپێکراوی
- پوختەی بەڵگەنامە و سەرچاوەکان، دۆزینەوەکانی خشتە و هتد؛ دروستکردنی خۆکاری پوختەی بەڵگەنامە و سەرچاوە
- یەکخستن و پشتڕاستکردنەوە: یەکخستنی واتایی زانیارییەکانی چەندین سەرچاوە و پشتڕاستکردنەوەی متمانەپێکراوی
- پاکێتی بەڵگە: پێشکەشکردنی پاکێتی وەڵام لەسەر بنەمای بەڵگە
بیرکردنەوەی ئاڵۆز و پلاندانەر
- Planner/DAG: پلانی هەنگاو بە هەنگاو و بیرکردنەوەی بنیاتنراو لەسەر DAG (Directed Acyclic Graph) بۆ پرسیارە ئاڵۆزەکان
پێکهاتەی ئەجێنتی یەکگرتوو
- cip-5-agent Supervisor: ئەجێنتی باڵادەست کە هەموو پرۆسەی گەڕان، بیرکردنەوە و یەکخستن بەڕێوە دەبات و ڕێکی دەخات
3. پوختە و بەراوردی پێکهاتە
بە کورتی، Semantic DB داتا بە شێوە جۆراوجۆرەکانەوە (دەنگ، دەق، وێنە، ڤیدیۆ و هتد) وەردەگرێت و زانیارییەکان پۆلێن دەکات؛ نەک تەنها بە Chunk، بەڵکو پەیوەندییە واتاییەکانی نێوان داتا (کۆنتێکست، چینبەندی، هۆکار و ئەنجام و هتد)یش بەیەکەوە دەبەستێت.
لەسەر ئەم بنەمایە، بەجێی گەڕانی بنیاتنراو لەسەر وشەی سەرەکی/هاوشێوەیی وەک RAG، گەڕان و بیرکردنەوە بە بەکارهێنانی پەیوەندییە واتاییەکان ئەنجام دەدرێت؛ بۆیە دەتوانیت لە AI ـەوە گەڕانی زانیاری و وەڵامی وردتر بەدەست بهێنیت.
هەروەها، چونکە بە شێوەی گرافی زانیاری/تۆڕی سێمانتیک پاشەکەوت دەکرێت، فراوانکردن و تەواوکردنی بەردەوامی ئاسانە.
CLEVI لە سەردەمی گۆڕانی گەورەی AI ـدا سنوورەکانی سیستەمی RAG ـی دۆزییەوە و بەهۆی بنکەدراوەی داتای سێمانتیک و مۆدێلی تایبەتی AI ـی خۆمانەوە، توانیمان وەڵامی داتای وردتر و متمانەپێکراوتر بە خێرایی بۆ کڕیاران بدەینەوە.
سیستەمی AI ـی CLEVI دەتوانێت لە هەر ژینگەیەکدا و بەبێ گوێدانە جۆری بوار، داتای بەهای کڕیاران بە شێوەیەکی بەسوود بگۆڕێت.
لە داهاتووشدا، CLEVI هەموو هەوڵێک دەدات بۆ زۆرکردنی بەهای داتای کڕیاران و پێشکەشکردنی ئەزموونێکی نوێخوازانەی AI.
لەگەڵ CLEVI ئەزموونی داهاتووی نوێی AI بکەن.
پەیوەندی و داواکاریی دیمۆ: [email protected]
Copyright© 2025 Clevi Inc. هەموو مافەکان پارێزراون.