Загвар

CLEVI-ийн загварууд нь ерөнхий зориулалтын оюун ухаан болон ажлын автоматжуулалтыг хариуцдаг CIP, дуу хоолой үүсгэх болон таних үйлдлийг хариуцдаг Cosa, баримт бичиг болон зургийн мэдээлэл задлан гаргах үйлдлийг хариуцдаг Cova гэсэн гурван бүтээгдэхүүний бүлэгт хуваагдана. Бүтээгдэхүүн бүрийг бие даан ашиглах эсвэл баримт бичиг таних, шинжлэх, ажил гүйцэтгэх, дуут заавар өгөх үйл явцтай холбогдсон үйлчилгээ болгон ашиглаж болно.

CIP

CIP нь ерөнхий зориулалтын оюун ухаан болон ажлын автоматжуулалтыг хариуцна. Үүнд шлюзээр дууддаг cip-5.5-im болон cip-5.5-mm, мөн захын сервер болон газар дээрх орчинд байршуулдаг cip-5.5-sm багтана.

cip-5.5-im болон cip-5.5-mm

cip-5.5-im нь зорилго болон ажлын хүрээ нь тодорхой ажилд тохиромжтой. Өгсөн материалаас шаардлагатай мэдээллийг гаргаж авах, заасан форматаар үр дүнг боловсруулах, шаардлагын дагуу кодыг өөрчлөх зэрэг ажилд ашиглана. Дээд тал нь 64K гаралт нь дэлгэрэнгүй тайлан эсвэл олон хэсгээс бүрдэх үр дүн боловсруулахад тохиромжтой.

• Хөгжүүлэлтийн туслалцаа: Функц болон боломжийг бичих, хүрээ нь тодорхой алдааг засах, одоо байгаа загварт нийцүүлэн хэрэгжүүлэхэд ашиглана.
• Тест үүсгэх: Шаардлага болон хэрэгжүүлэлтэд үндэслэн тестийн төсөл, баталгаажуулалтын тохиолдлуудыг боловсруулна.
• Баримт бичиг боловсруулах: Хураангуйлах, ангилах, зүйлсийг гаргаж авах, маягт хөрвүүлэх болон төсөл боловсруулах ажлыг гүйцэтгэнэ.
• Мультимодал шинжилгээ: Дэлгэцийн зураг болон баримт бичгийн хүснэгт, диаграммыг холбогдох тайлбарын хамт хянана.
• Харилцан ярианд суурилсан ажлын дэмжлэг: Ажлын материалд үндэслэн асуултад хариулж, шаардлагатай үр дүнг боловсруулна.
• Их хэмжээний боловсруулалт: Олон баримт бичгийг тус бүрээр нь хураангуйлах, хүсэлтийг ангилах, өгөгдөл хөрвүүлэхэд ашиглана.
• Дэд агент: Код судлах, тодорхой файл хянах, материал эмхлэх зэрэг хил хязгаар нь тодорхой дэд ажлыг гүйцэтгэнэ.

Жишээлбэл, боломжийн шаардлага болон холбогдох кодыг авч өөрчлөлтийн санал, тест, өөрчлөлтийн тайлбар боловсруулах, эсвэл хүлээн авсан баримт бичгүүдийг ангилж хариуцагчид зориулсан хураангуй гаргахад ашиглана.

cip-5.5-mm нь мэдээлэл хоорондын харилцааг ойлгож, нийт ажлын уялдаа холбоог хадгалах шаардлагатай ажилд тохиромжтой. Хөгжүүлэлтийн хувьд шаардлага, загвар, хэрэгжүүлэлт, тестийн уялдааг хянаж, баримт бичгийн шинжилгээнд олон материалын дэвшүүлсэн санаа ба нотолгоо, ялгаа ба зөрчлийг нэгтгэн дүгнэнэ.

• Нарийн төвөгтэй боломж хэрэгжүүлэх: Олон модулийн гэрээ болон үйлдлийг харгалзан код, тест, баримт бичгийг хамтад нь өөрчилнө.
• Том хэмжээний кодын шинжилгээ: Дуудлагын хамаарал, өгөгдлийн урсгал, өөрчлөлтийн нөлөөллийн хүрээг хянана.
• Саатлын шалтгааны шинжилгээ: Лог, тохиргоо, код, ажиллуулах үр дүнг харьцуулж, шалтгааны таамаглал болон баталгаажуулах журмыг эмхэлнэ.
• Загварчлал ба шийдвэр гаргалтын дэмжлэг: Шаардлага болон хязгаарлалтыг бүтэцжүүлж, хэрэгжүүлэлтийн хувилбаруудын нөлөөллийг шинжилнэ.
• Олон баримт бичгийг нэгтгэн шинжлэх: Тайлан болон техникийн баримт бичгийн нийтлэг тал, ялгаа, зөрчлийг нотолгоонд тулгуурлан эмхэлнэ.
• Мультимодал нэгтгэсэн хяналт: Текст болон харааны материалыг хамтад нь тайлбарлаж, асуудал болон шаардлагыг шинжилнэ.
• Олон үе шаттай агент: Судалгаа, төлөвлөлт, хэрэгсэл ажиллуулах, үр дүнг хянах дараалалтай ажилд ашиглана.
• Мэргэжлийн баримт бичиг боловсруулах: Нарийн төвөгтэй нөхцөл болон нотолгоог тусгасан техникийн тайлан, загварын санал, дэлгэрэнгүй хяналтын баримт бичгийг боловсруулна.

Жишээлбэл, олон үйлчилгээнд гарсан алдааны холбогдох код болон логийг хамтад нь шалгах, эсвэл нийлмэл функцийн шаардлагын шинжилгээнээс хэрэгжүүлэлт болон баталгаажуулалтын үр дүнг шалгах хүртэл үргэлжлэх ажилд ашиглана.

cip-5.5-sm

cip-5.5-sm нь захын сервер болон байгууллагын дотоод орчинд локал дүгнэлт гаргалт, ажлын автоматжуулалтыг гүйцэтгэнэ. Загварын хэмжээг 24B~40B хүрээнд тохируулах боломжтой тул байршуулалтын төхөөрөмжийн тооцоолох нөөц болон талбарын шаардлагатай гүйцэтгэлд тохируулан тохиргоог сонгоно. Өгөгдөл үүсэж буй цэгт ойр боловсруулдаг тул талбарын системтэй холбох болон дотоод өгөгдлийг ашиглахад хэрэглэнэ. Шаардлагатай загвар, хэрэгслүүдийг локалд тохируулснаар гадаад холболт хязгаарлагдмал орчинд ч ажиллуулах боломжтой.

Талбарт үүссэн мэдээллийг тайлбарлаж, боловсруулах үйл явцтай холбох үүрэгтэй. Лог болон хүсэлтийг ангилж, өгөгдлөөс шаардлагатай мэдээллийг гарган авч, холбогдсон дотоод хэрэгсэл болон скриптээр давтагддаг ажлыг гүйцэтгэнэ.

• Талбарын үйл явдал боловсруулах: Төхөөрөмжийн лог болон төлөвийн мэдээллийг ангилж, шалгах шаардлагатай үйл явдлыг ялгана.
• Өгөгдөл урьдчилан боловсруулах: Ажлын бүртгэлээс гол зүйлсийг гарган авч, ангилах, тэмдэглэгээ хийх, хэвийнжүүлэх ажлыг гүйцэтгэнэ.
• Хүсэлт чиглүүлэх: Хүлээн авсан хүсэлтийг хариуцсан систем эсвэл боловсруулах үйл явц руу дамжуулна.
• Локал ажлын агент: Дотоод системээс мэдээлэл авах болон скрипт ажиллуулах замаар давтагддаг ажлыг гүйцэтгэнэ.
• Дотоод орчны ажлын дэмжлэг: Дотоод материалыг үндэслэн асуултад хариулж, ажлын агуулгыг эмхэтгэнэ.
• Дараагийн шинжилгээний дэмжлэг: Нэмэлтээр шалгах шаардлагатай материалыг ялган, гол агуулгыг эмхэтгэнэ.

Жишээлбэл, байгууллагын сервер дээр ажиллаж буй логийг ангилж, холбогдох түүхийг шалгасны дараа хариуцсан ажилтанд зориулсан хэрэг явдлын хураангуйг бичих урсгалд ашиглана.

Cosa

Cosa нь текстийг дуу хоолой болгон хувиргах, оролтын дуу хоолойг текст хэлбэрээр таних, хүссэн дуу хоолойг бүртгэж дахин ашиглах боломжтой дуу хоолойн бүтээгдэхүүний цуглуулга юм. Үйлчилгээний танилцуулга, контент бүтээх, хүртээмжийг дэмжих, харилцан ярианы агентын дуу хоолойн интерфейст ашиглана.

Дуу хоолой үүсгэхийг cosa-a болон cosa-b, дуу хоолой танихыг cosa-asr хариуцна. cosa-a болон cosa-b нь тус бүр өөрийн дуу хоолойн жагсаалт болон синтезийн тохиргоог хангадаг тусдаа загварууд бөгөөд ижил үйлчилгээний интерфейсээс сонгоно. Хоёр загварт нийтлэг олгодог функцууд нь дараах байдалтай байна.

• Текстийг яриа болгон хувиргах: Оруулсан өгүүлбэрийг сонгосон дуу хоолойгоор синтезлэнэ.
• Дуу хоолой хуулбарлах: Ашиглах эрхтэй лавлагаа бичлэгт үндэслэн дуу хоолойг бүртгэж, шинэ өгүүлбэрийг синтезлэнэ.
• Дуу хоолой дизайн хийх: Хүссэн дуу хоолойн шинжийг тайлбарлан дуу хоолой үүсгэж, бүртгэнэ.
• Дуу хоолойг дахин ашиглах: Бүртгэсэн дуу хоолойг дараагийн синтезэд ашиглана.
• Синтезийн тохиргоо: Ярих хурд, хэл зэрэг тохиргоог өөрчилнө.
• Стрийминг дамжуулалт: Текст ирмэгц хэллэгээр нь синтезлэж, аудиог дарааллаар дамжуулна.
• Тоглуулах удирдлага: Түр зогсоох, үргэлжлүүлэх, зогсоох болон нэмэлт өгүүлбэр оруулахыг дэмжинэ.

Аажмаар текст оруулах аргыг ашигласнаар хариулт бүрэн дуусахаас өмнө дуу хоолойг тоглуулж эхлэх боломжтой. CIP хариултыг боловсруулж байх зуур Cosa бэлэн болсон хэллэгүүдийг уншдаг үйлчилгээг тохируулж болно.

cosa-a

cosa-a нь текстийг яриа болгон хувиргах, дуу хоолой хуулбарлах, дуу хоолой дизайн хийх болон стрийминг гаралтыг дэмждэг. Дуу хоолой, хэл, ярих хурдыг сонгох үндсэн функцээс гадна синтезийн алхмын тоо, чиглүүлэлтийн хүч, үүсгэх урттай холбоотой тохиргоо зэрэг нэмэлт удирдлагын зүйлсийг санал болгодог. Дуу хоолой бүтээх явцад тохиргоог өөрчилж үр дүнг шалгах, эсвэл ижил эх бичвэрт олон тохиргоо хэрэглэн үр дүнг сонгох үйл явцад ашиглана.

• Апп, киоск болон ажлын системийн заавар, мэдэгдлийг синтезлэнэ.
• Сургалтын материал болон хэрэглэгчийн зааврыг дуу хоолой болгон бүтээнэ.
• Видео болон аудио контентын тайлбарыг бүтээнэ.
• Бүртгэсэн дуу хоолойгоор давтамжтай контент бүтээнэ.
• Харилцан үйлдэлт агентын стрийминг дуу хоолойн гаралтад ашиглана.
• Нарийвчилсан синтезийн тохиргоог өөрчлөх дуу хоолой бүтээлтэд ашиглана.

cosa-b

cosa-b нь урьдчилан тохируулсан дуу хоолой сонгох, тайлбарт үндэслэн дуу хоолой дизайн хийх, лавлагаа дуу хоолойд үндэслэн хуулбарлах болон стрийминг гаралтыг дэмждэг. Өөрийн дуу хоолойн жагсаалтаас дуу хоолой сонгох эсвэл үйлчилгээнд ашиглах шинэ дуу хоолой бүртгэнэ.

Дуу хоолой хуулбарлахад лавлагаа бичлэг болон түүнд харгалзах текстийг ашиглана. Бүртгэлийн явцад дуу хоолой таних аргаар лавлагаа текст үүсгэх үйл явцыг мөн дэмждэг бөгөөд бүртгэгдсэн дуу хоолойг дараагийн синтезэд дахин ашиглана.

• Үйлчилгээ болон дүрийн дуу хоолойн персонаг бүрдүүлнэ.
• Тайлбар эсвэл лавлагаа бичлэгээр тохируулсан дуу хоолой бүтээнэ.
• Брэндийн заавар, дүрийн яриа болон контентын тайлбарыг синтезлэнэ.
• Харилцан үйлдэлт агентын дуу хоолойн хариултад ашиглана.
• Ижил дуу хоолойгоор өөрчлөгдөх зааварчилгааны мессеж болон эх бичвэрийг синтезлэнэ.

cosa-a болон cosa-b-ээс аль нэгийг сонгохдоо хүсэж буй дуу хоолой, бодит синтезийн үр дүн, шаардлагатай хяналтын үзүүлэлтүүдийг үндэслэл болгоно уу.

cosa-asr

cosa-asr нь оролтын дуу хоолойг текст болгон хөрвүүлнэ. Бичлэгийн материалыг баримтжуулах эсвэл дуу хоолойгоор ирсэн хүсэлтийг дараагийн ажлын систем боловсруулах боломжтой оролт болгон хувиргана.

• Дуу хоолойн тэмдэглэл болон бичлэгийн материалыг текст болгон буулгана.
• Дуу хоолойд суурилсан асуулт болон ажлын хүсэлтийг оролт болгон хувиргана.
• Дуу хоолой хуулбарлах лавлах текст үүсгэнэ.
• Текст буулгасны дараах хураангуйлах, ангилах, хайх үйл явцад ашиглана.

Текст буулгалтын үр дүнг CIP-д дамжуулснаар агуулгыг хураангуйлах, хүсэлтийг ангилах, ажлын ноорог боловсруулах үйл явц үргэлжилнэ. Боловсруулалтын үр дүнг cosa-a эсвэл cosa-b-ээр синтезлэснээр дуу хоолойн оролт, гаралттай ажлын үйлчилгээ бий болно.

Cova

cova-1 нь LLM-д суурилсан, харааны OCR-д зориулсан тусгай загвар юм. Баримт бичиг болон зургаас текст таньж, зохион байгуулалт ба хүснэгтийн бүтцийг гарган авч, харааны элементүүдийн талаар товч тайлбар өгнө.

Хүмүүсийн уншдаг баримт бичгийг агент болон ажлын систем ашиглахад тохиромжтой хэлбэрт хөрвүүлнэ. Үндсэн текст болон хүснэгтийг бүтэцжүүлсэн агуулга болгон гаргаж, баримт бичигт багтсан зургийг товч тайлбар болгон дамжуулдаг тул дараагийн агент баримт бичгийн агуулга болон харааны нөхцөл байдлыг хамтад нь ойлгоно. Эхлээд гаргаж авсан текст, тайлбараар материалыг ойлгож, нарийвчлан шалгах шаардлагатай эх хувийг л дараа нь нэмж хянадаг урсгалыг бүрдүүлснээр эх зургийг дахин дахин оруулах хэмжээг багасгаж, контекст токеныг хэмнэнэ.

• Баримтыг дижиталжуулах: Цаасан баримт болон сканнердсан материалыг текстэд суурилсан материал болгон хөрвүүлнэ.
• Ажлын баримт хүлээн авах: Өргөдөл, нотлох баримт, тайлангаас агуулгыг гаргана.
• Хүснэгтийн өгөгдөл боловсруулах: Баримтад багтсан хүснэгтийг дараагийн өгөгдөл боловсруулахад ашиглана.
• Мэдлэг хайх урьдчилсан боловсруулалт: Баримтын зураг болон харааны материалыг хайх боломжтой текст, бүтэц болгон хөрвүүлнэ.
• Баримт хянах автоматжуулалт: Гаргасан үр дүнг CIP-д дамжуулж, зүйлсийг шалгах, хураангуйлах, материалуудыг харьцуулах ажлыг гүйцэтгэнэ.
• Агентийн оролтыг оновчлох: Урт баримтын үндсэн хэсэг, хүснэгт, зургийн тайлбарыг эмхэлж, шаардлагатай мэдээллийг л дамжуулна.

Жишээлбэл, тайлангийн үндсэн хэсэг болон хүснэгтийг гаргахын зэрэгцээ оруулсан графикийг улирал бүрийн борлуулалтын чиг хандлагыг харуулсан график гэж тайлбарлана. Агент энэ тайлбараар график байгаа эсэх болон зориулалтыг ойлгож, нарийн тоо эсвэл чиг хандлага шаардлагатай үед тухайн эх хувийг нэмэлтээр шалгана.

Бүтээгдэхүүний бүлгийг холбох

Бүтээгдэхүүнүүдийг холбосноор дараах урсгалыг бүрдүүлж болно.

• Баримтад суурилсан ажил: Cova үндсэн хэсэг, хүснэгт, зургийн тайлбарыг гаргаж, CIP шаардлагатай эх хувийг сонгон шалган дүн шинжилгээ болон ажлын боловсруулалтыг гүйцэтгэж, Cosa үр дүнг дуугаар хүргэнэ.
• Дуу хоолойд суурилсан ажил: Cosa ASR дуу хоолойн хүсэлтийг текст болгон хөрвүүлж, CIP-ийн боловсруулсан хариуг cosa-a эсвэл cosa-b уншиж өгнө.
• Талбайн автоматжуулалт: cip-5.5-sm талбайн өгөгдлийг ангилж, орон нутгийн ажлыг гүйцэтгэн, нэмэлт нэгдсэн шинжилгээ шаардлагатай материалыг cip-5.5-im эсвэл cip-5.5-mm руу дамжуулна.

Гарц дээр зөвшөөрөгдсөн дуудлагууд

Gateway-ийн төлөвлөгөө нь загвар бүрт зөвшөөрөгдөх дуудлагуудыг тодорхойлдог. Доорх хүснэгтэд LLM_FREE, TTS_FREE, STT_FREE төлөвлөгөөнүүдийн нээдэг боломжуудыг харуулсан бөгөөд эдгээр төлөвлөгөө нь хүсэлт гаргалгүйгээр автоматаар хэрэгжинэ. Бусад замаар нээгдсэн загваруудыг оруулаагүй.

cip-5.5-sm болон cova-1 нь энэ багцын хүснэгтэд байхгүй. Хүснэгтэд буй cip-5.5-im-chat, cip-5.5-mm-h, cosa-tts, ivy-4-embedding, ivy-4-embedding-mm, ivy-4-mm нь дээрх бүтээгдэхүүний тайлбарт ороогүй загварын ID-ууд юм. Дуудлагын түлхүүр аль замд хамаарахыг API дуудлагын баримт бичигт тайлбарласан.