Developer guide
Модель
Моделдин кыскача баяны
CLEVI моделдери жалпы интеллект жана ишти автоматташтырууга жооп берген CIP, үн жаратуу жана таанууга жооп берген Cosa, документтерден жана сүрөттөрдөн маалымат чыгарууга жооп берген Cova аттуу үч продукт тобуна бөлүнөт. Ар бир продукт өз алдынча колдонулушу же документти таануу, талдоо, ишти аткаруу жана үн аркылуу багыт берүү процесстерине бириктирилген кызмат катары колдонулушу мүмкүн.
| Продукт | Модель ID | Негизги мүнөздөмөлөрү | Негизги ролу |
|---|---|---|---|
| CIP-5.5-SM | cip-5.5-sm | 24B~40B жөндөлүүчү | Edge серверлерде жана локалдык ишти автоматташтыруу |
| CIP-5.5-IM | cip-5.5-im | 360B · киргизүү 256K · чыгаруу 64K · мультимодалдык | Жалпы ишти аткаруу. Жооп берүү ылдамдыгы жана өткөрүү жөндөмдүүлүгү артыкчылыктуу |
| CIP-5.5-MM | cip-5.5-mm | 800B · киргизүү 512K · чыгаруу 64K · мультимодалдык | Узун контекстти талдоо жана татаал маселелерди чечүү |
| Cosa-A | cosa-a | Үн синтези·көчүрмө·дизайн·стриминг | Үн синтезин майда-чүйдөсүнө чейин башкаруу менен үн жаратуу |
| Cosa-B | cosa-b | Үн синтези·көчүрмө·дизайн·стриминг | Үндү тандоо жана жекелештирилген үн жаратуу |
| Cosa ASR | cosa-asr | Үн таануу | Үн киргизүүнү текстке айландыруу |
| Cova | cova-1 | LLM негизиндеги көрүү OCR үчүн арналган | Текстти, жайгашууну жана таблицаларды чыгаруу, ошондой эле сүрөттөрдү жөнөкөй сүрөттөө |
CIP
CIP жалпы интеллектке жана ишти автоматташтырууга жооп берет. Анын курамына шлюз аркылуу чакырылуучу cip-5.5-im жана cip-5.5-mm, ошондой эле Edge серверлерге жана жергиликтүү инфраструктурага жайгаштырылуучу cip-5.5-sm кирет.
cip-5.5-im жана cip-5.5-mm
| Пункт | cip-5.5-im | cip-5.5-mm |
|---|---|---|
| Масштабы | 360B | 800B |
| Киргизүү чеги | 256K | 512K |
| Максималдуу чыгаруу | 64K | 64K |
| Киргизүү форматтары | Текст жана визуалдык материалдар (документтер, экран сүрөттөрү, таблицалар·диаграммалар) | Текст жана визуалдык материалдар (кодду·документтерди·экран материалдарын бириктирип карап чыгуу) |
| Колдонуу багыты | Жооп берүү ылдамдыгына, чыгымдардын натыйжалуулугуна жана өткөрүү жөндөмдүүлүгүнө басым жасап, күнүмдүк билимге негизделген иштерди жана иштеп чыгуу тапшырмаларын аткарат. | Бир нече материалды жана шартты комплекстүү карап чыгып, талдоо натыйжаларын чыныгы ишке уланткан татаал иштерди аткарат. |
| Узун киргизүүнүн максаты | Бир нече документти, код файлдарын жана баарлашуу тарыхын бирге карап чыгат. | Кеңири маалымдама материалдарын жана иш тарыхын бирге иштетип, изилдөө·аткаруу·текшерүү бир нече этапка созулган агенттик иштерди аткарат. |
cip-5.5-im максаттары жана иш көлөмү так аныкталган иштерге ылайыктуу. Берилген материалдардан керектүү маалыматты чыгарып, көрсөтүлгөн форматта жыйынтык даярдоо жана талаптарга ылайык кодду өзгөртүү — мүнөздүү тапшырмалар. Максималдуу 64K чыгаруу көлөмү деталдуу отчетторду же бир нече бөлүктөн турган натыйжаларды даярдоодо колдонулат.
- Иштеп чыгууну колдоо: функцияларды жана мүмкүнчүлүктөрдү жазат, көлөмү так аныкталган каталарды оңдойт жана учурдагы үлгүлөргө ылайык ишке ашырат.
- Тесттерди түзүү: талаптардын жана ишке ашыруунун негизинде тесттердин долбоорлорун жана текшерүү учурларын даярдайт.
- Документтерди иштетүү: жыйынтыктоо, классификациялоо, пункттарды чыгаруу, форманы өзгөртүү жана долбоорлорду даярдоо иштерин аткарат.
- Мультимодалдык талдоо: экрандагы сүрөттөрдү жана документтердеги таблица·диаграммаларды тиешелүү түшүндүрмөлөрү менен карап чыгат.
- Диалогдук иш колдоосу: иш материалдарынын негизинде суроолорго жооп берип, керектүү натыйжаларды даярдайт.
- Жапырт иштетүү: көп сандагы документтердин жекече жыйынтыктарын даярдоодо, өтүнүчтөрдү классификациялоодо жана маалыматтарды өзгөртүүдө колдонулат.
- Субагент: кодду изилдөө, белгилүү бир файлды карап чыгуу жана материалдарды иреттөө сыяктуу чеги так аныкталган кичи тапшырмаларды аткарат.
Мисалы, функциянын талаптарын жана тиешелүү кодду алып, өзгөртүү сунушун, тесттерди жана өзгөртүүлөрдүн түшүндүрмөсүн даярдоодо же кабыл алуу документтерин классификациялап, жооптуу кызматкер үчүн жыйынтык даярдоодо колдонулат.
cip-5.5-mm маалыматтардын ортосундагы байланыштарды түшүнүү жана бүтүндөй иштин ырааттуулугун сактоо талап кылынган иштерге ылайыктуу. Иштеп чыгууда талаптардын, дизайндын, ишке ашыруунун жана тесттердин байланышын карап чыгат, ал эми документтерди талдоодо бир нече материалдагы дооматтар менен далилдерди, айырмачылыктар менен карама-каршылыктарды комплекстүү талдайт.
- Татаал функцияларды ишке ашыруу: бир нече модулдун келишимдерин жана жүрүм-турумун эске алып, кодду, тесттерди жана документтерди бирге өзгөртөт.
- Кодду масштабдуу талдоо: чакыруу байланыштарын, маалымат агымын жана өзгөртүүнүн таасир чөйрөсүн карап чыгат.
- Катачылыктардын себептерин талдоо: журналдарды, конфигурацияны, кодду жана аткаруунун натыйжаларын салыштырып, себеп боюнча божомолдорду жана текшерүү жол-жобосун иреттейт.
- Дизайнды жана чечим кабыл алууну колдоо: талаптарды жана чектөөлөрдү түзүмдөштүрүп, ишке ашыруу варианттарынын таасирин талдайт.
- Бир нече документти комплекстүү талдоо: отчеттордогу жана техникалык документтердеги окшоштуктарды, айырмачылыктарды жана карама-каршылыктарды далилдердин негизинде иреттейт.
- Мультимодалдык интеграцияланган кароо: текстти жана визуалдык материалдарды бирге чечмелеп, көйгөйлөрдү жана талаптарды талдайт.
- Көп баскычтуу агент: изилдөө, пландоо, куралдарды аткаруу жана натыйжаларды кароо менен уланган иштерде колдонулат.
- Адистештирилген документтерди даярдоо: татаал шарттарды жана далилдерди эске алган техникалык отчетторду, дизайн сунуштарын жана деталдуу кароо документтерин даярдайт.
Мисалы, бир нече кызматта пайда болгон каталардын тиешелүү коддору менен журналдарын чогуу карап чыгуу же татаал функциянын талаптарын талдоодон баштап ишке ашырууга жана текшерүүнүн жыйынтыктарын карап чыгууга чейин уланган иштерде колдонулат.
cip-5.5-sm
cip-5.5-sm кырдагы серверлерде жана жергиликтүү инфраструктура чөйрөлөрүндө локалдык инференс менен ишти автоматташтырууну аткарат. Модель көлөмүн 24B~40B диапазонунда жөнгө салууга болот, ошондуктан жайгаштырылуучу жабдуунун эсептөө ресурстарына жана жеринде талап кылынган өндүрүмдүүлүккө ылайык конфигурацияны тандаса болот. Маалымат пайда болгон жерге жакын иштетилгендиктен, кырдагы системалар менен интеграциялоодо жана ички маалыматтарды пайдаланууда колдонулат. Керектүү моделдерди жана куралдарды локалдык түрдө конфигурацияласаңыз, тышкы туташуу чектелген чөйрөдө да иштете аласыз.
Кырда пайда болгон маалыматты чечмелеп, аны иштетүү процедураларына байланыштырган роль аткарат. Журналдарды жана сурамдарды классификациялап, маалыматтан керектүү маалыматтарды чыгарып, туташтырылган ички куралдар жана скрипттер аркылуу кайталануучу иштерди аткарат.
- Кырдагы окуяларды иштетүү: Жабдуулардын журналдарын жана абалы тууралуу маалыматты классификациялап, текшерүү талап кылынган окуяларды иргейт.
- Маалыматтарды алдын ала иштетүү: Иш жазууларынан негизги пункттарды чыгарып, классификациялайт, тегдейт жана нормалдаштырат.
- Сурамдарды багыттоо: Кабыл алынган сурамдарды жооптуу системага же иштетүү процедурасына өткөрүп берет.
- Локалдык иш агенти: Ички системаларды сурап, скрипттерди аткаруу аркылуу кайталануучу иштерди аткарат.
- Локалдык инфраструктурадагы ишти колдоо: Ички материалдардын негизинде суроолорго жооп берип, иштин мазмунун иретке келтирет.
- Кийинки талдоону колдоо: Кошумча кароону талап кылган материалдарды иргеп, негизги мазмунун жыйынтыктайт.
Мисалы, ишканадагы серверде иштөө журналдарын классификациялап, тиешелүү тарыхты карап чыккандан кийин жооптуу кызматкер үчүн окуянын кыскача мазмунун түзүү агымында колдонулат.
Cosa
Cosa текстти үнгө айландырып, киргизилген үндү текст катары таанып, каалаган үндү каттап, кайра колдонууга мүмкүндүк берген үн продуктуларынын топтому. Кызмат тууралуу маалымат берүүдө, контент түзүүдө, жеткиликтүүлүктү колдоодо жана диалогдук агенттердин үн интерфейсинде колдонулат.
Үн түзүү үчүн cosa-a жана cosa-b, ал эми үндү таануу үчүн cosa-asr жооп берет. cosa-a жана cosa-b — ар бири өзүнүн үн тизмесин жана синтездөө жөндөөлөрүн сунуштаган өзүнчө моделдер; аларды бир эле кызмат интерфейсинен тандаса болот. Эки модель тең сунуштаган функциялар төмөнкүлөр:
- Текстти кепке айландыруу: киргизилген сүйлөмдөрдү тандалган үн менен синтездейт.
- Үндү клондоо: колдонууга уруксаты бар референстик жаздыруунун негизинде үндү каттап, жаңы сүйлөмдөрдү синтездейт.
- Үндү долбоорлоо: каалаган үндүн өзгөчөлүктөрүн сүрөттөп, үн түзүп жана каттайт.
- Үндү кайра колдонуу: катталган үндү кийинки синтездөөдө колдонот.
- Синтездөө жөндөөлөрү: сүйлөө ылдамдыгын, тилди жана башка параметрлерди жөндөйт.
- Агымдык жеткирүү: текст келген сайын аны фразалар боюнча синтездеп, аудиону ирети менен жеткирет.
- Ойнотууну башкаруу: тыныгуу, улантуу, токтотуу жана кошумча сүйлөмдөрдү киргизүүнү колдойт.
Бара-бара киргизилген текстти колдонуу менен жооп толук түзүлө электе эле үн ойнотууну баштоого болот. CIP жоопту түзүп жатканда, Cosa даяр болгон фразаларды окуп бере турган кызматты түзө аласыз.
cosa-a
cosa-a текстти кепке айландырууну, үндү клондоону, үндү долбоорлоону жана агымдык чыгарууну колдойт. Үн, тил жана сүйлөө ылдамдыгын тандоо сыяктуу негизги функцияларга кошумча, синтездөө кадамдарынын санына, багыттоо күчүнө жана генерациянын узактыгына байланыштуу жөндөөлөр сыяктуу кошумча башкаруу параметрлерин сунуштайт. Аларды үн түзүү процессинде жөндөөлөрдү өзгөртүп, натыйжаны карап чыгуу же бир эле текстке бир нече жөндөөнү колдонуп, натыйжалардын ичинен тандоо үчүн колдонсо болот.
- Колдонмолор, киосктор жана иш тутумдары үчүн көрсөтмөлөрдү жана эскертмелерди синтездейт.
- Окуу материалдарын жана колдонмолорду үнгө айлантат.
- Видео жана аудио мазмун үчүн баяндоолорду түзөт.
- Катталган үн менен кайталануучу мазмунду түзөт.
- Интерактивдүү агенттердин агымдык үн чыгаруусунда колдонот.
- Синтездөөнүн майда жөндөөлөрүн өзгөртүү талап кылынган үн түзүүдө колдонот.
cosa-b
cosa-b алдын ала орнотулган үндөрдү тандоону, сүрөттөмөнүн негизинде үн долбоорлоону, референстик үн аркылуу клондоону жана агымдык чыгарууну колдойт. Өзүнүн үн тизмесинен үн тандап же кызматта колдонуу үчүн жаңы үн каттайт.
Үндү клондоо үчүн референстик жаздыруу жана ага туура келген текст колдонулат. Каттоо процессинде кепти таануу аркылуу референстик текстти түзүү агымы да колдоого алынат, ал эми катталган үн кийинки синтездөөдө кайра колдонулат.
- Кызматтар жана каармандар үчүн үн персонасын түзөт.
- Сүрөттөмө же референстик жаздыруу аркылуу ыңгайлаштырылган үн түзөт.
- Бренддик көрсөтмөлөрдү, каармандардын репликаларын жана мазмундун баяндоолорун синтездейт.
- Интерактивдүү агенттердин үн жоопторунда колдонот.
- Өзгөрүп турган көрсөтмөлөрдү жана тексттерди бир эле үн менен синтездейт.
cosa-a менен cosa-bнин бирин тандоодо каалаган үнүңүздү, иш жүзүндөгү синтез натыйжасын жана керектүү башкаруу параметрлерин негиз катары алыңыз.
| Параметр | cosa-a | cosa-b |
|---|---|---|
| Синтез жөндөөлөрү | Үн, тил жана сүйлөө ылдамдыгынан тышкары, синтез баскычтарынын санына, guidance күчүнө жана түзүлүүчү узактыкка байланыштуу жөндөөлөр | Сүйлөө ылдамдыгы жана тил сыяктуу жалпы жөндөөлөр |
| Көчүрүү үчүн киргизүү | Пайдаланууга уруксаты бар эталондук жазуу | Эталондук жазуу жана ага туура келген текст. Каттоо процессинде кепти таануу аркылуу эталондук текстти түзүүгө болот |
| Ролу | Синтезди майда-чүйдөсүнө чейин башкаруу мүмкүнчүлүктөрүн колдонуп үн түзүү | Үн тандоо жана ыңгайлаштырылган үн түзүү |
cosa-asr
cosa-asr киргизилген үндү текстке айландырат. Жаздырууларды документтештирүүгө же үн аркылуу келген өтүнүчтөрдү кийинки иш тутумдары иштете ала турган киргизүүгө өзгөртүүгө мүмкүндүк берет.
- Үн эскертмелерин жана жаздырууларды текстке түшүрөт.
- Үнгө негизделген суроолорду жана иш өтүнүчтөрүн киргизүүгө айландырат.
- Үн көчүрүү үчүн эталондук текст түзөт.
- Текстке түшүрүүдөн кийинки жыйынтыктоо, классификациялоо жана издөө процесстеринде колдонулат.
Текстке түшүрүү натыйжасын CIPке өткөрсөңүз, мазмунду жыйынтыктоо, өтүнүчтөрдү классификациялоо жана иштин долбоорун түзүү процесстери уланат. Иштетүүнүн натыйжасын cosa-a же cosa-b менен синтездесеңиз, үн киргизүүсү жана чыгаруусу бар иш кызматы пайда болот.
Cova
cova-1 — LLM негизиндеги, визуалдык OCR үчүн атайын модель. Документтердеги жана сүрөттөрдөгү текстти тааныйт, макетти жана таблицалардын түзүмүн чыгарат, ошондой эле визуалдык элементтерге кыскача түшүндүрмө берет.
Адамдар көргөн документтерди агенттер жана иш тутумдары колдонууга ыңгайлуу формага айландырат. Негизги текст менен таблицалар структураланган мазмун катары чыгарылат, ал эми документке камтылган сүрөттөр кыскача түшүндүрмө түрүндө берилет. Ошондуктан кийинки агенттер документтин мазмунун жана визуалдык контекстин бирге түшүнө алышат. Алгач алынган текст жана түшүндүрмөлөр аркылуу материалды түшүнүп, кеңири текшерүү талап кылынган түпнуска бөлүктөрүн гана кошумча карап чыгуучу процессти түзсөңүз, түпнуска сүрөттөрдү кайра-кайра киргизүүнү азайтып, контексттик токендерди үнөмдөй аласыз.
| Функция | Түшүндүрмө |
|---|---|
| Текстти таануу | Сканерленген же сүрөткө тартылган документтерден текстти чыгарат. |
| Макетти чечмелөө | Документтин жайгашуусун эске алып, мазмунду блокторго бөлөт. |
| Жайгашкан жер тууралуу маалымат берүү | Таанылган блоктордун жайгашкан жерин берип, чыгарылган натыйжаларды түпнуска менен байланыштырат. |
| Таблицанын түзүмүн чыгаруу | Таблицанын мазмунун түзүмдөп, издөөдө жана маалыматтарды иштетүүдө колдонот. |
| Сүрөттү кыскача сүрөттөө | Сүрөттүн жана визуалдык элементтердин мазмунун кыскача сүрөттөп, агентке чечмелөө үчүн багыт берет. |
| Контекстти оптималдаштыруу | Маалыматты текстке, түзүмгө жана сүрөттөмөгө басым жасап жеткирип, түпнуска сүрөттү кайталап киргизүүнү азайтат. |
| Тандалма деталдуу талдоо | Агентке кошумча текшериле турган түпнуска сүрөттөрдү аныктоого жардам берет. |
| Документ форматын өзгөртүү | Таануу натыйжаларын HTML же Markdown форматында иреттейт. |
- Документтерди санариптештирүү: кагаз документтерди жана сканерленген материалдарды текстке негизделген материалдарга айлантат.
- Иш документтерин кабыл алуу: арыздардан, тастыктоочу материалдардан жана отчеттордон мазмунду чыгарат.
- Таблицалык маалыматтарды иштетүү: документтердеги таблицаларды кийинки маалымат иштетүүгө колдонот.
- Билимди издөө үчүн алдын ала иштетүү: документтердин сүрөттөрүн жана визуалдык материалдарды издөөгө мүмкүн болгон текстке жана түзүмгө айлантат.
- Документтерди кароону автоматташтыруу: чыгарылган натыйжаларды CIPке өткөрүп, пункттарды текшерет, жыйынтыктайт жана материалдарды салыштырат.
- Агенттин киргизүүсүн оптималдаштыруу: узун документтердин негизги текстин, таблицаларын жана сүрөттөмөлөрүн иреттеп, керектүү маалыматты гана өткөрөт.
Мисалы, отчеттун негизги текстин жана таблицаларын чыгарып жатып, анда камтылган графикти кварталдар боюнча сатуулардын өзгөрүшүн көрсөткөн график катары сүрөттөйт. Агент бул сүрөттөмө аркылуу графиктин бар экенин жана максатын түшүнүп, так сандар же тенденциялар керек болгондо тиешелүү түпнуска материалды кошумча карап чыгат.
Продукттар топтомун туташтыруу
Продукттарды туташтырганда төмөнкү агымды түзүүгө болот.
- Документке негизделген иштер: Cova негизги текстти, таблицаларды жана сүрөттөмөлөрдү чыгарат, CIP керектүү түпнуска материалдарды тандалма түрдө текшерип, талдоо жана иштетүүнү аткарат, ал эми Cosa натыйжаларды үн аркылуу жеткирет.
- Үнгө негизделген иштер: Cosa ASR үн өтүнүчтөрүн текстке айландырат, ал эми CIP иштеткен жоопторду cosa-a же cosa-b окуп берет.
- Жеринде автоматташтыруу: cip-5.5-sm жеринде чогултулган маалыматтарды классификациялап, жергиликтүү иштерди аткарат, ал эми кошумча комплекстүү талдоо талап кылынган материалдарды cip-5.5-im же cip-5.5-mm моделдерине өткөрөт.
Гейтвейде уруксат берилген чакыруулар
Gateway’дин пландары ар бир модель үчүн уруксат берилген чакырууларды аныктайт. Төмөнкү таблицада LLM_FREE, TTS_FREE жана STT_FREE пландары ачкан мүмкүнчүлүктөр көрсөтүлгөн; бул пландар өтүнмө бербестен автоматтык түрдө колдонулат. Башка жолдор аркылуу ачылган моделдер камтылган эмес.
| Модель ID | Уруксат берилген чакыруулар | Негиз болгон план |
|---|---|---|
| cip-5.5-im | anthropic.messages · chat.completions · chat.completions.batch · completions · responses | LLM_FREE |
| cip-5.5-im-chat | anthropic.messages · chat.completions · chat.completions.batch · completions · responses | LLM_FREE |
| cip-5.5-mm | anthropic.messages · chat.completions · chat.completions.batch · completions · responses | LLM_FREE |
| cip-5.5-mm-h | anthropic.messages · chat.completions · chat.completions.batch · completions · responses | LLM_FREE |
| cosa-a | audio.speech · audio.speech.clone · voices · voices.design | TTS_FREE |
| cosa-b | audio.speech · audio.speech.clone · voices · voices.design | TTS_FREE |
| cosa-tts | audio.speech · audio.speech.clone · voices · voices.design | TTS_FREE |
| cosa-asr | audio.transcriptions | STT_FREE |
| ivy-4-embedding | embeddings | LLM_FREE |
| ivy-4-embedding-mm | embeddings | LLM_FREE |
| ivy-4-mm | anthropic.messages · chat.completions · chat.completions.batch · completions · responses | LLM_FREE |
cip-5.5-sm жана cova-1 бул тариф планындагы таблицада жок. Таблицадагы cip-5.5-im-chat, cip-5.5-mm-h, cosa-tts, ivy-4-embedding, ivy-4-embedding-mm, ivy-4-mm — жогорудагы продукт сүрөттөмөсүнө кирбеген модель ID'лери. Чакыруу ачкычы кайсы жолго тиешелүү экени API чакыруу документинде көрсөтүлгөн.