Modell

D’CLEVI-Modeller sinn an dräi Produktfamilljen agedeelt: CIP fir allgemeng Intelligenz an d’Automatiséierung vun Aarbechten, Cosa fir d’Generéierung an d’Erkennung vu Sprooch, a Cova fir d’Informatiounsextraktioun aus Dokumenter a Biller. All Produkt kann onofhängeg benotzt oder zu Servicer verbonne ginn, déi vun der Dokumentenerkennung an Analyse iwwer d’Ausféierung vun Aarbechten bis zur sproochlecher Féierung reechen.

CIP

CIP ass fir allgemeng Intelligenz an d’Automatiséierung vun Aarbechten zoustänneg. Et besteet aus cip-5.5-im an cip-5.5-mm, déi iwwer e Gateway opgeruff ginn, souwéi cip-5.5-sm, dat op Edge-Serveren an on-premises agesat gëtt.

cip-5.5-im a cip-5.5-mm

cip-5.5-im مناسب للمهام اللي أهدافها ونطاقها واضحين. من الأمثلة الأساسية استخراج المعلومات المطلوبة من المواد المقدَّمة، إعداد النتائج بالتنسيق المحدَّد، وتعديل الكود بما يتوافق مع المتطلبات. والحد الأقصى البالغ 64K للإخراج مفيد لإعداد تقارير مفصّلة أو نتائج مؤلّفة من عدّة أجزاء.

• مساعدة بالتطوير: كتابة الدوال والميزات، إصلاح الأخطاء الواضحة النطاق، وتنفيذ التعديلات بما يتوافق مع الأنماط الموجودة.
• إنشاء الاختبارات: إعداد مسودات الاختبارات وحالات التحقّق استنادًا إلى المتطلبات والتنفيذ.
• معالجة المستندات: تولّي التلخيص والتصنيف واستخراج العناصر وتحويل التنسيقات وإعداد المسودات.
• التحليل المتعدد الوسائط: مراجعة صور الشاشات والجداول والمخططات في المستندات مع الشروحات ذات الصلة.
• دعم تفاعلي للمهام: الإجابة عن الأسئلة استنادًا إلى مواد العمل وإعداد النتائج المطلوبة.
• المعالجة على نطاق واسع: استخدامه لتلخيص عدد كبير من المستندات بشكل منفصل، وتصنيف الطلبات، وتحويل البيانات.
• الوكيل الفرعي: تولّي المهام الفرعية ذات الحدود الواضحة، مثل استكشاف الكود، ومراجعة ملفات محدّدة، وترتيب المواد.

على سبيل المثال، يُستخدم لاستلام متطلبات الميزة والكود المرتبط بها، ثم إعداد اقتراح تعديل واختبارات وشرح للتغييرات، أو لتصنيف مستندات الطلبات وإعداد ملخّص للمسؤول عنها.

cip-5.5-mm مناسب للمهام اللي بتتطلّب فهم العلاقات بين المعلومات والحفاظ على اتساق العمل ككل. بالتطوير، بيراجع الترابط بين المتطلبات والتصميم والتنفيذ والاختبارات، وبتحليل المستندات بيجمع ادعاءات وأدلة ومواطن الاختلاف والتناقض بين مواد متعدّدة.

• تنفيذ ميزات معقّدة: تغيير الكود والاختبارات والمستندات معًا، مع مراعاة عقود وسلوك عدّة وحدات.
• تحليل كود واسع النطاق: مراجعة علاقات الاستدعاء وتدفّق البيانات ونطاق تأثير التغييرات.
• تحليل أسباب الأعطال: مقارنة السجلات والإعدادات والكود ونتائج التنفيذ، وترتيب فرضيات السبب وإجراءات التحقّق منها.
• دعم التصميم واتخاذ القرارات: هيكلة المتطلبات والقيود وتحليل تأثير بدائل التنفيذ.
• تحليل تركيبي لعدّة مستندات: تنظيم أوجه التشابه والاختلاف والتناقض بين التقارير والمستندات التقنية بالاستناد إلى الأدلة.
• مراجعة تكاملية متعددة الوسائط: تفسير النصوص والمواد المرئية معًا لتحليل المشاكل والمتطلبات.
• وكيل متعدد المراحل: استخدامه للمهام اللي بتتضمّن البحث والتخطيط وتنفيذ الأدوات ومراجعة النتائج.
• إعداد مستندات متخصصة: كتابة تقارير تقنية ومقترحات تصميم ومستندات مراجعة مفصّلة تعكس الشروط والأدلة المعقّدة.

Zum Beispill gëtt et benotzt, fir déi relevant Coden a Logge vu Feeler aus verschiddene Servicer zesummen ze iwwerpréiwen oder Aufgaben auszeféieren, déi vun der Analyse vun den Ufuerderunge fir komplex Funktiounen iwwer d'Ëmsetzung bis zur Iwwerpréiwung vun de Validéierungsresultater reechen.

cip-5.5-sm

cip-5.5-sm féiert lokal Inferenz an d'Automatiséierung vun Aarbechten op Edge-Serveren an an On-Premises-Ëmfeld aus. Well d'Modellgréisst am Beräich vun 24B bis 40B ugepasst ka ginn, kann d'Konfiguratioun un d'Rechenressourcen vun den Deployementgeräter an déi erfuerderlech Leeschtung op der Plaz ugepasst ginn. Well d'Veraarbechtung no bei der Plaz stattfënnt, wou d'Donnéeë entstinn, gëtt et fir d'Integratioun mat Systemer op der Plaz an d'Notzung vun internen Donnéeë benotzt. Wann déi néideg Modeller an Tools lokal konfiguréiert sinn, kann et och an Ëmfeld mat begrenzter externer Verbindung bedriwwe ginn.

Et iwwerhëlt d'Aufgab, Informatiounen, déi op der Plaz entstinn, ze interpretéieren an an de Veraarbechtungsprozess ze iwwerdroen. Et klasséiert Loggen an Ufroen, extrahéiert déi néideg Informatioun aus den Donnéeën a féiert widderhuelend Aarbechten mat verbonne internen Tools a Skripter aus.

• Veraarbechtung vun Evenementer op der Plaz: Klasséiert d'Loggen an d'Statusinformatioune vun den Ausrüstungen a filtert d'Evenementer eraus, déi iwwerpréift musse ginn.
• Virveraarbechtung vun Donnéeën: Extrahéiert déi wichtegst Elementer aus den Aarbechtsopzeechnungen a klasséiert, taggt a normaliséiert se.
• Routing vun Ufroen: Leet erakommend Ufroen un de zoustännege System oder de Veraarbechtungsprozess weider.
• Lokalen Aarbechtsagent: Féiert widderhuelend Aarbechten duerch d'Ofruff vun internen Systemer an d'Ausféierung vu Skripter aus.
• Ënnerstëtzung vun On-Premises-Aarbechten: Beäntwert Froen op Basis vun internen Dokumenter a faasst Aarbechtsinhalter zesummen.
• Ënnerstëtzung bei der Nofolleganalyse: Wielt Dokumenter aus, déi zousätzlech iwwerpréift musse ginn, a faasst déi wichtegst Inhalter zesummen.

Zum Beispill gëtt et an engem Prozess benotzt, an deem d'Betribslogge vun engem Betribsserver klasséiert ginn, déi relevant Geschicht ofgeruff gëtt an eng Zesummefaassung vum Virfall fir déi zoustänneg Persoun erstallt gëtt.

Cosa

Cosa ass eng Produktfamill fir d'Sprooch an Audio ëmzewandelen, erakommend Sprooch als Text ze erkennen an déi gewënschte Stëmm ze registréieren an nei ze benotzen. Et gëtt fir Serviceinformatiounen, d'Produktioun vun Inhalter, Accessibilitéitsënnerstëtzung an d'Stëmminterface vun dialogorientéierten Agente benotzt.

D'Sproochgeneratioun gëtt vu cosa-a a cosa-b iwwerholl, d'Sproocherkennung vu cosa-asr. cosa-a a cosa-b si separat Modeller, déi jeeweils hir eege Stëmmelëschten a Syntheseastellunge ubidden a kënnen an der selwechter Serviceinterface ausgewielt ginn. Déi Funktiounen, déi béid Modeller gemeinsam ubidden, sinn déi folgend.

• Text-zu-Sprooch: Synthetiséiert den aginnene Saz mat der ausgewielter Stëmm.
• Stëmmeklonen: Registréiert eng Stëmm op Basis vun enger Referenzopnam, fir déi d'Benotzungsrechter virleien, a synthetiséiert nei Sätz.
• Stëmmdesign: Erstellt a registréiert eng Stëmm, andeems d'Eegeschafte vun der gewënschter Stëmm beschriwwe ginn.
• Stëmmewiederverwendung: Benotzt eng registréiert Stëmm fir spéider Synthesen.
• Syntheseastellungen: Passt d'Geschwindegkeet vum Schwätzen, d'Sprooch an aner Parameteren un.
• Streaming-Iwwerdroung: Synthetiséiert den Text a Sazdeeler, soubal en ukënnt, a liwwert den Audio noeneen aus.
• Ofspillerkontroll: Ënnerstëtzt Paus, Fortsetzung, Ënnerbriechung an d'Aginn vun zousätzleche Sätz.

Mat progressiver Texteraginn kann d'Ofspille vun der Sprooch ufänken, ier déi ganz Äntwert fäerdeg ass. Wärend CIP d'Äntwert schreift, kann Cosa esou konfiguréiert ginn, datt et déi fäerdeg Sazdeeler virliest.

cosa-a

cosa-a ënnerstëtzt Text-zu-Sprooch, Stëmmeklonen, Stëmmdesign an Streaming-Ausgab. Nieft de Basisfunktioune fir Stëmm, Sprooch a Schwätzgeschwindegkeet auszewielen, bitt et zousätzlech Kontrollméiglechkeeten, dorënner Astellunge fir d'Zuel vun de Syntheseschrëtt, d'Stäerkt vun der Guidance an d'Längt vun der Generatioun. Et gëtt benotzt, fir d'Astellunge wärend der Stëmmproduktioun unzepassen an d'Resultat ze iwwerpréiwen oder verschidden Astellungen op datselwecht Manuskript unzewenden an e Resultat auszewielen.

• Erstellt Usagen an Notifikatioune fir Apps, Kiosken an Aarbechtssystemer.
• Erstellt Audiomaterial fir Ausbildung a Benotzungsanleitungen.
• Produzéiert Narratiounen fir Video- an Audiocontenu.
• Produzéiert widderhuelend Contenu mat registréierte Stëmmen.
• Benotzt et fir gestreamten Audioausgab vun dialogorientéierten Agenten.
• Benotzt et fir d'Stëmmproduktioun mat Upassung vun detailléierte Syntheseastellungen.

cosa-b

cosa-b ënnerstëtzt d'Auswiel vu presetéierte Stëmmen, beschreiwungsbaséierte Stëmmdesign, Referenzstëmme-baséiert Klonen an Streaming-Ausgab. Dir kënnt eng Stëmm aus der eegener Stëmmlëscht auswielen oder eng nei Stëmm fir de Gebrauch am Service registréieren.

Fir d'Klonen vun enger Stëmm ginn eng Referenzopnam an den entspriechenden Text benotzt. Et gëtt och e Prozess ënnerstëtzt, bei deem den Referenztext wärend der Registréierung duerch Sproocherkennung generéiert gëtt. Registréiert Stëmme kënnen an de spéidere Synthesen wiederverwend ginn.

• Konfiguréiert d'Stëmmeperséinlechkeet vu Servicer a Figuren.
• Produzéiert personaliséiert Stëmme mat enger Beschreiwung oder enger Referenzopnam.
• Synthetiséiert Markenanleitungen, Figurendialoger a Contenu-Narratiounen.
• Benotzt et fir sproochlech Äntwerte vun dialogorientéierten Agenten.
• Synthetiséiert aktualiséiert Usagen a Manuskripter mat derselwechter Stëmm.

Wann Dir tëscht cosa-a a cosa-b wielt, orientéiert Iech un der gewënschter Stëmm, dem tatsächleche Syntheseresultat an de Kontrolloptiounen, déi Dir braucht.

cosa-asr

cosa-asr konvertéiert d'Input-Stëmm an Text. Et dokumentéiert Opnamen oder konvertéiert Ufroen, déi iwwer d'Stëmm erakommen, an Input, dee spéider vun Aarbechtssystemer veraarbecht ka ginn.

• Stëmmnotizen an Opnamen transkribéieren.
• Stëmm-baséiert Froen an Aarbechtsufroen an Input konvertéieren.
• Referenztexter fir d'Stëmmklonen generéieren.
• Fir Prozesser no der Transkriptioun ze benotzen, déi zu Zesummefaassung, Klassifikatioun a Sich weiderféieren.

Wann Dir d'Transkriptiounsresultat un CIP weidergitt, féiert dat zu enger Zesummefaassung vum Inhalt, enger Klassifikatioun vun den Ufroen an der Erstellung vun Aarbechtsentwërf. Wann Dir d'Veraarbechtungsresultat mat cosa-a oder cosa-b synthetiséiert, kritt Dir en Aarbechtsservice mat Stëmm-Input an -Output.

Cova

cova-1 ass e LLM-baséierte Modell, dee speziell fir visuell OCR entwéckelt gouf. Et erkennt Text an Dokumenter a Biller, extrahéiert Layouten an Tabellestrukturen a liwwert kuerz Beschreiwunge vu visuellen Elementer.

Et konvertéiert Dokumenter, wéi se vu Mënsche gesi ginn, an e Format, dat Agente an Aarbechtssystemer besser benotze kënnen. Den Haapttext an d'Tabelle ginn als strukturéierten Inhalt extrahéiert, während d'Biller am Dokument a kuerze Beschreiwunge vermëttelt ginn. Doduerch kënnen nofolgend Agente souwuel den Inhalt wéi och de visuelle Kontext vum Dokument verstoen. Wann Dir e Prozess opstellt, bei deem Dir d'Material fir d'éischt mat dem extrahéierten Text an de Beschreiwunge erfaasst an nëmmen d'Originaler, bei deenen eng detailléiert Iwwerpréiwung néideg ass, zousätzlech kontrolléiert, reduzéiert Dir d'Zuel vun de Widderhuelungen, bei deenen d'Originalbiller aginn ginn, a spuert Kontext-Token.

• Digitaliséierung vun Dokumenter: Konvertéiert Pabeierdokumenter a gescannt Material an textbaséiert Ressourcen.
• Entgéinthuele vun Aarbechtsdokumenter: Extrahéiert Inhalter aus Uwendungen, Beleeër a Rapporten.
• Veraarbechtung vun Tabellendaten: Benotzt Tabellen aus Dokumenter fir d'nofolgend Dateveraarbechtung.
• Virbereedung fir d'Wëssenssich: Konvertéiert Dokumentbiller a visuell Material an duerchsichbaren Text a Strukturen.
• Automatiséierung vun der Dokumentiwwerpréiwung: Leet d'Extraktiounsresultater un CIP weider, fir Elementer ze iwwerpréiwen, Zesummefaassungen ze erstellen a Material mateneen ze vergläichen.
• Optimiséierung vun Agent-Input: Strukturéiert den Text, d'Tabellen an d'Bildbeschreiwunge vu laangen Dokumenter a vermëttelt nëmmen déi néideg Informatioun.

Zum Beispill gëtt den Text an d'Tabelle vun engem Rapport extrahéiert, wärend eng agebett Grafik als Grafik beschriwwe gëtt, déi d'Entwécklung vum Véierelsëmsaz weist. Den Agent erkennt duerch dës Beschreiwung d'Existenz an den Zweck vun der Grafik a iwwerpréift d'Original zousätzlech, wann genee Zuelen oder Trends gebraucht ginn.

Verbindung vu Produktfamillen

Duerch d'Verbindung vu Produkter kann de folgende Flux opgebaut ginn.

• Dokumentbaséiert Aarbecht: Cova extrahéiert den Text, d'Tabellen an d'Bildbeschreiwungen, CIP iwwerpréift selektiv déi néideg Originaler fir Analysen an d'Veraarbechtung vun Aarbechten duerchzeféieren, a Cosa iwwerdréit d'Resultater per Sprooch.
• Sproochbaséiert Aarbecht: Cosa ASR konvertéiert eng sproochlech Ufro an Text, an cosa-a oder cosa-b liest d'Äntwert vir, déi CIP veraarbecht huet.
• Automatiséierung op der Plaz: cip-5.5-sm klasséiert Donnéeën op der Plaz a féiert lokal Aarbechten duerch, wärend Material, dat eng zousätzlech integréiert Analyse erfuerdert, un cip-5.5-im oder cip-5.5-mm weidergeleet gëtt.

Erlaabte Riff um Gateway

D'Pläng vum Gateway bestëmmen, wéi eng Uruff pro Modell erlaabt sinn. D'Tabell hei drënner weist de Beräich, deen duerch d'Pläng LLM_FREE, TTS_FREE a STT_FREE opgemaach gëtt; dës Pläng ginn automatesch applizéiert, ouni datt eng Demande néideg ass. Modeller, déi iwwer aner Weeër opgemaach ginn, sinn net enthalen.

cip-5.5-sm a cova-1 sinn net an dëser Plangentabell. D'cip-5.5-im-chat, cip-5.5-mm-h, cosa-tts, ivy-4-embedding, ivy-4-embedding-mm an ivy-4-mm an der Tabell si Modell-IDs, déi net an den uewe genannte Produktbeschreiwunge virkommen. A wéi engem Wee den Uruffschlëssel gehéiert, steet am Dokument iwwer API-Uriff.