Developer guide

Líkan

Yfirlit yfir líkön

CLEVI-líkönunum er skipt í þrjá vöruflokka: CIP, sem sér um almenna greind og sjálfvirknivæðingu verkefna; Cosa, sem sér um raddmyndun og raddgreiningu; og Cova, sem sér um upplýsingaútdrátt úr skjölum og myndum. Hægt er að nota hverja vöru sjálfstætt eða tengja þær saman í þjónustu sem nær yfir skjalagreiningu, greiningu, framkvæmd verkefna og raddleiðbeiningar.

VaraAuðkenni líkansHelstu tæknilýsingarMeginhlutverk
CIP-5.5-SMcip-5.5-sm24B~40B stillanlegtSjálfvirknivæðing staðbundinna verkefna á jaðrþjónum og í staðbundnu umhverfi
CIP-5.5-IMcip-5.5-im360B · inntak 256K · úttak 64K · margmiðlunAlmenn úrvinnsla verkefna. Forgangur að svarhraða og afköstum
CIP-5.5-MMcip-5.5-mm800B · inntak 512K · úttak 64K · margmiðlunGreining á löngu samhengi og úrlausn flókinna vandamála
Cosa-Acosa-aRaddmyndun · raddklónun · raddhönnun · streymiRaddmyndun með nákvæmri stjórn á myndun
Cosa-Bcosa-bRaddmyndun · raddklónun · raddhönnun · streymiVal á rödd og sérsniðin raddmyndun
Cosa ASRcosa-asrRaddgreiningUmbreyting raddinntaks í texta
Covacova-1LLM-undirstaða eingöngu fyrir sjónrænt OCRÚtdráttur texta, útlits og taflna ásamt einfaldri lýsingu á myndum

CIP

CIP sér um almenna greind og sjálfvirknivæðingu verkefna. Það samanstendur af cip-5.5-im og cip-5.5-mm, sem eru kölluð í gegnum gátt, og cip-5.5-sm, sem er dreift á jaðrþjóna og í staðbundið umhverfi.

cip-5.5-im og cip-5.5-mm

Atriðicip-5.5-imcip-5.5-mm
Stærð360B800B
Takmörk inntaks256K512K
Hámarksúttak64K64K
InntakssniðTexti og sjónrænt efni (skjöl, skjámyndir, töflur og gröf)Texti og sjónrænt efni (yfirferð þar sem kóði, skjöl og skjáefni eru samþætt)
MegináherslaVinnur úr daglegum þekkingarverkefnum og þróunarverkefnum með áherslu á svarhraða, hagkvæmni og afköst.Vinnur úr flóknum verkefnum þar sem mörg gögn og skilyrði eru samþætt og greiningarniðurstöður tengdar við raunveruleg verkefni.
Tilgangur langs inntaksFer yfir mörg skjöl, kóðaskrár og samtalsferil samtímis.Meðhöndlar umfangsmikið heimildarefni og verkferla samtímis og framkvæmir umboðsmannsverkefni þar sem rannsókn, framkvæmd og sannprófun fara fram í mörgum þrepum.

cip-5.5-im hentar verkefnum þar sem markmið og umfang vinnunnar eru skýr. Dæmigerð verkefni eru að draga nauðsynlegar upplýsingar úr afhentu efni, útbúa niðurstöður á tilgreindu sniði og breyta kóða í samræmi við kröfur. Hámarksúttak upp á 64K er ætlað til að semja ítarlegar skýrslur eða niðurstöður sem samanstanda af mörgum hlutum.

  • Þróunaraðstoð: Skrifar föll og eiginleika, lagar villur með skýrt umfang og útfærir í samræmi við fyrirliggjandi mynstur.
  • Prófanagerð: Skrifar drög að prófunum og sannprófunartilvikum út frá kröfum og útfærslu.
  • Skjalavinnsla: Tekur að sér samantektir, flokkun, útdrátt atriða, umbreytingu sniða og gerð draga.
  • Fjölmiðlagreining: Skoðar skjámyndir og töflur og gröf í skjölum ásamt viðeigandi skýringum.
  • Gagnvirkur stuðningur við vinnu: Svarar spurningum út frá vinnugögnum og útbýr nauðsynlegar niðurstöður.
  • Vinnsla í stórum mælikvarða: Er notuð fyrir einstaklingsbundnar samantektir margra skjala, flokkun beiðna og umbreytingu gagna.
  • Undirumboðsmaður: Tekur að sér afmörkuð undirverkefni á borð við könnun á kóða, yfirferð tiltekinnar skráar og skipulagningu efnis.

Til dæmis er það notað til að taka við virknikröfum og tengdum kóða og útbúa breytingartillögu, prófanir og lýsingu á breytingum, eða til að flokka móttökuskjöl og útbúa samantekt fyrir ábyrgðaraðila.

cip-5.5-mm hentar verkefnum þar sem greina þarf tengsl milli upplýsinga og viðhalda samræmi í öllu verkefninu. Í þróun er farið yfir tengsl krafna, hönnunar, útfærslu og prófana, en í skjalagreiningu eru fullyrðingar og rökstuðningur, mismunur og mótsagnir í mörgum gögnum tekin saman.

  • Útfærsla flókinna eiginleika: Breytir kóða, prófunum og skjölum í sameiningu með hliðsjón af samningum og hegðun margra eininga.
  • Greining stórra kóðagrunns: Fer yfir köllunartengsl, gagnaflæði og umfang áhrifa breytinga.
  • Greining á orsök bilunar: Ber saman annála, stillingar, kóða og niðurstöður keyrslu og setur fram tilgátur um orsök og aðferðir til staðfestingar.
  • Stuðningur við hönnun og ákvarðanatöku: Setur kröfur og takmarkanir í skipulegt form og greinir áhrif valkosta við útfærslu.
  • Heildstæð greining margra skjala: Setur sameiginleg atriði, mismun og mótsagnir í skýrslum og tækniskjölum saman á grundvelli gagna.
  • Samþætt fjölmiðlayfirferð: Túlkar texta og myndefni saman til að greina vandamál og kröfur.
  • Fjölþrepa umboðsmaður: Er notaður í verkefnum sem fela í sér rannsókn, áætlanagerð, keyrslu verkfæra og yfirferð niðurstaðna.
  • Gerð sérfræðiskjala: Skrifar tækniskýrslur, hönnunartillögur og ítarleg yfirferðarskjöl sem taka mið af flóknum skilyrðum og rökstuðningi.

Til dæmis er það notað til að fara yfir viðeigandi kóða og annála vegna villna sem koma upp í mörgum þjónustum, eða í verkefnum sem ná frá kröfugreiningu flókinna eiginleika til útfærslu og yfirferðar á niðurstöðum sannprófunar.

cip-5.5-sm

cip-5.5-sm framkvæmir staðbundna ályktun og sjálfvirkni verkferla á jaðrþjónum og í staðbundnu umhverfi. Þar sem hægt er að stilla umfang líkansins á bilinu 24B~40B er hægt að velja uppsetningu sem hentar útreikningsauðlindum uppsetningarbúnaðarins og þeim afköstum sem krafist er á vettvangi. Þar sem úrvinnslan fer fram nálægt þeim stað þar sem gögnin verða til er það notað til samþættingar við kerfi á vettvangi og nýtingar innri gagna. Ef nauðsynleg líkön og verkfæri eru sett upp staðbundið er einnig hægt að reka það í umhverfi þar sem ytri tengingar eru takmarkaðar.

Það gegnir því hlutverki að túlka upplýsingar sem verða til á vettvangi og tengja þær við verkferla. Það flokkar annála og beiðnir, dregur nauðsynlegar upplýsingar úr gögnum og framkvæmir endurtekin verkefni með tengdum innri verkfærum og skriftum.

  • Úrvinnsla atvika á vettvangi: Flokkar annála búnaðar og stöðuupplýsinga og velur þau atvik sem þarfnast athugunar.
  • Forvinnsla gagna: Dregur lykilatriði úr vinnuskráningum og flokkar, merkir og staðlar þau.
  • Beining beiðna: Framsendir mótteknar beiðnir til ábyrgðarkerfis eða viðeigandi verkferlis.
  • Staðbundinn vinnuþjónn: Framkvæmir endurtekin verkefni með því að fletta upp í innri kerfum og keyra skriftur.
  • Stuðningur við vinnu í staðbundnu umhverfi: Svarar spurningum á grundvelli innra efnis og tekur saman upplýsingar um verkefni.
  • Stuðningur við eftirfylgnigreiningu: Velur efni sem þarfnast frekari yfirferðar og tekur saman lykilatriði.

Til dæmis er það notað í verkferli þar sem rekstrarannálar á netþjóni starfsstöðvar eru flokkaðir, tengd ferilsgögn sótt og atvikayfirlit útbúið fyrir ábyrgðaraðila.

Cosa

Cosa er vöruflokkur fyrir tal sem umbreytir texta í tal, greinir inntakstal sem texta og gerir kleift að skrá og endurnýta viðkomandi rödd. Það er notað fyrir þjónustuleiðbeiningar, efnissköpun, aðgengisstuðning og raddviðmót samræðuþjóna.

cosa-a og cosa-b sjá um talmyndun og cosa-asr sér um talgreiningu. cosa-a og cosa-b eru aðskilin líkön sem bjóða hvort um sig upp á eigin raddlista og samsetningarstillingar og eru valin í sama þjónustuviðmóti. Eiginleikar sem bæði líkönin bjóða sameiginlega upp á eru eftirfarandi:

  • Texti í tal: Setningin sem þú slærð inn er umbreytt í tal með valinni rödd.
  • Raddklónun: Rödd er skráð og nýjar setningar samsettar út frá viðmiðunarupptöku sem þú hefur heimild til að nota.
  • Raddhönnun: Rödd er búin til og skráð með því að lýsa eiginleikum raddarinnar sem þú vilt nota.
  • Endurnotkun raddar: Skráð rödd er notuð í síðari talgervingu.
  • Talgerðarstillingar: Hraði tals, tungumál og fleira er stillt.
  • Straumspilun: Textinn er talgerður í setningabrotum um leið og hann berst og hljóðið sent í röð.
  • Stýring afspilunar: Styður hlé, áframhald, stöðvun og innslátt viðbótarsetninga.

Með stigvaxandi textainnslætti er hægt að hefja afspilun tals áður en allt svarið er tilbúið. Á meðan CIP semur svarið er hægt að setja upp þjónustu þar sem Cosa les upp tilbúin setningabrot.

cosa-a

cosa-a styður texta í tal, raddklónun, raddhönnun og straumspilun úttaks. Auk grunnvirkni á borð við val á rödd, tungumáli og talhraða býður það upp á viðbótarstýringar, svo sem stillingar fyrir fjölda talgerðarþrepa, styrk leiðbeininga og lengd myndunar. Það er notað til að stilla ferlið við raddgerð og yfirfara niðurstöðuna eða beita mörgum stillingum á sama handriti og velja niðurstöðuna sem hentar.

  • Leiðbeiningar og tilkynningar í öppum, söluturnum og viðskiptakerfum eru talgerðar.
  • Kennsluefni og notendaleiðbeiningar eru gerð að tali.
  • Skrifuð frásögn fyrir myndefni og hljóðefni er búin til.
  • Endurtekið efni er búið til með skráðri rödd.
  • Notað fyrir straumspilað talúttak gagnvirkra aðstoðarmanna.
  • Notað við raddgerð þar sem ítarlegar talgerðarstillingar eru lagaðar að.

cosa-b

cosa-b styður val á forstilltum röddum, lýsingarbundna raddhönnun, klónun út frá viðmiðunarrödd og straumspilun úttaks. Þú getur valið rödd úr eigin raddlista eða skráð nýja rödd til notkunar í þjónustunni.

Við raddklónun eru notuð viðmiðunarupptaka og samsvarandi texti. Það styður einnig ferli þar sem viðmiðunartextinn er búinn til með talgreiningu við skráningu, og skráða röddin er endurnotuð í síðari talgervingu.

  • Raddpersóna þjónustu og persóna er mótuð.
  • Sérsniðin rödd er búin til út frá lýsingu eða viðmiðunarupptöku.
  • Vörumerkjatilkynningar, persónusamræður og frásagnir í efni eru talgerðar.
  • Notað fyrir raddsvör gagnvirkra aðstoðarmanna.
  • Leiðbeiningaskilaboð og handrit sem taka breytingum eru talgerð með sömu rödd.

Þegar þú velur á milli cosa-a og cosa-b skaltu hafa æskilega rödd, raunverulega niðurstöðu talgervingar og þá stjórnunarmöguleika sem þú þarft í huga.

Atriðicosa-acosa-b
Stillingar talgervingarAuk raddar, tungumáls og talhraða eru stillingar fyrir fjölda þrepa í talgervingu, leiðbeiningastyrk og myndunarlengdSameiginlegar stillingar á borð við talhraða og tungumál
Inntak fyrir raddafritunViðmiðunarupptaka sem þú hefur heimild til að notaViðmiðunarupptaka og samsvarandi texti. Við skráningu er hægt að búa til viðmiðunartexta með talgreiningu
HlutverkRaddmyndun með nákvæmri stjórnun talgervingarRaddval og sérsniðin raddmyndun

cosa-asr

cosa-asr breytir innsendri rödd í texta. Það skráir upptökur í texta eða breytir beiðnum sem berast með rödd í inntak sem eftirfarandi verkkerfi geta unnið úr.

  • Skrifar upp talglósur og upptökur.
  • Breytir spurningum og vinnubeiðnum sem berast með rödd í inntak.
  • Býr til viðmiðunartexta fyrir raddafritun.
  • Er notað í vinnslu sem heldur áfram eftir uppskrift með samantekt, flokkun og leit.

Þegar niðurstöður uppskriftar eru sendar til CIP leiðir það til samantektar á efni, flokkunar beiðna og gerðar vinnudraga. Ef vinnsluniðurstaðan er gerð að tali með cosa-a eða cosa-b verður til vinnuþjónusta með raddinntaki og raddúttaki.

Cova

cova-1 er LLM-byggt sérhæft sjón-OCR-líkan. Það greinir texta í skjölum og myndum, dregur út uppsetningu og töfluskipan og veitir stuttar lýsingar á sjónrænum þáttum.

Það breytir skjölum eins og fólk sér þau í form sem umboðsmenn og verkkerfi geta unnið með. Meginmál og töflur eru dregin út sem skipulagt efni og myndum í skjalinu er miðlað með stuttum lýsingum, þannig að eftirfarandi umboðsmaður getur skilið bæði innihald skjalsins og sjónrænt samhengi þess. Með því að setja upp ferli þar sem efnið er fyrst kannað með útdregnum texta og lýsingum og aðeins frumrit sem þarfnast nákvæmrar staðfestingar er skoðað frekar, má draga úr því hversu oft upprunalegar myndir eru sendar inn og spara samhengistákn.

EiginleikiLýsing
TextagreiningDregur út texta úr skjölum sem eru skönnuð eða ljósmynduð.
Túlkun uppsetningarSkiptir efni í blokkir með hliðsjón af uppsetningu skjalsins.
Upplýsingar um staðsetninguGefur upp staðsetningu greindra blokka svo hægt sé að tengja útdráttarniðurstöður við upprunalega textann.
Útdráttur á töflugerðSkipuleggur innihald taflna svo hægt sé að nota það við leit og gagnavinnslu.
Einföld myndlýsingLýsir innihaldi mynda og sjónrænna þátta í stuttu máli og gefur umboðsmanninum vísbendingar til túlkunar.
Hagræðing samhengisMiðlar upplýsingum með áherslu á texta, uppbyggingu og myndlýsingar og dregur þannig úr endurteknu inntaki upprunalegra mynda.
Valfrjáls ítarleg greiningHjálpar umboðsmanninum að ákvarða hvaða upprunalegar myndir þarf að skoða frekar.
Umbreyting skjalasniðsSkipuleggur greiningarniðurstöður í HTML eða Markdown.
  • Stafræn væðing skjala: Umbreytir pappírsskjölum og skönnuðum gögnum í textabundið efni.
  • Móttaka viðskiptaskjala: Dregur út efni úr umsóknareyðublöðum, fylgigögnum og skýrslum.
  • Vinnsla töflugagna: Notar töflur í skjölum við frekari gagnavinnslu.
  • Forvinnsla fyrir þekkingarleit: Umbreytir skjalamyndum og sjónrænu efni í leitanlegan texta og skipulag.
  • Sjálfvirk skjalayfirferð: Sendir útdráttarniðurstöður til CIP til að sannreyna atriði, taka saman efni og bera saman gögn.
  • Hagræðing inntaks fyrir umboðsmann: Skipuleggur meginmál, töflur og myndlýsingar í löngum skjölum og miðlar aðeins nauðsynlegum upplýsingum.

Til dæmis er meginmál og tafla úr skýrslu dregin út á meðan innfelldu línuriti er lýst sem línuriti sem sýnir ársfjórðungslega þróun sölu. Umboðsmaðurinn skilur tilvist og tilgang línuritsins út frá þessari lýsingu og skoðar upprunalega efnið frekar þegar nákvæmra talna eða þróunar er þörf.

Tenging vöruflokka

Með því að tengja vörur er hægt að setja upp eftirfarandi flæði.

  • Skjalamiðuð vinna: Cova dregur út meginmál, töflur og myndlýsingar, CIP velur og skoðar nauðsynlegt upprunalegt efni og framkvæmir greiningu og úrvinnslu, en Cosa miðlar niðurstöðunum með tali.
  • Talmiðuð vinna: Cosa ASR umbreytir raddbeiðnum í texta og cosa-a eða cosa-b les upp svörin sem CIP hefur unnið úr.
  • Sjálfvirkni á vettvangi: cip-5.5-sm flokkar gögn á vettvangi og framkvæmir staðbundin verkefni, en framsendir gögn sem þarfnast frekari heildstæðrar greiningar til cip-5.5-im eða cip-5.5-mm.

Leyfð köll í gáttinni

Áætlun gáttarinnar ákvarðar hvaða köll eru leyfð fyrir hvert líkan. Taflan hér að neðan sýnir umfangið sem LLM_FREE-, TTS_FREE- og STT_FREE-áætlanirnar opna, og þessar áætlanir eru virkjaðar sjálfkrafa án umsóknar. Líkön sem eru opnuð eftir öðrum leiðum eru ekki meðtalin.

Auðkenni líkansLeyfð köllGrunnáætlun
cip-5.5-imanthropic.messages · chat.completions · chat.completions.batch · completions · responsesLLM_FREE
cip-5.5-im-chatanthropic.messages · chat.completions · chat.completions.batch · completions · responsesLLM_FREE
cip-5.5-mmanthropic.messages · chat.completions · chat.completions.batch · completions · responsesLLM_FREE
cip-5.5-mm-hanthropic.messages · chat.completions · chat.completions.batch · completions · responsesLLM_FREE
cosa-aaudio.speech · audio.speech.clone · voices · voices.designTTS_FREE
cosa-baudio.speech · audio.speech.clone · voices · voices.designTTS_FREE
cosa-ttsaudio.speech · audio.speech.clone · voices · voices.designTTS_FREE
cosa-asraudio.transcriptionsSTT_FREE
ivy-4-embeddingembeddingsLLM_FREE
ivy-4-embedding-mmembeddingsLLM_FREE
ivy-4-mmanthropic.messages · chat.completions · chat.completions.batch · completions · responsesLLM_FREE

cip-5.5-sm og cova-1 eru ekki í þessari áætlunartöflu. cip-5.5-im-chat, cip-5.5-mm-h, cosa-tts, ivy-4-embedding, ivy-4-embedding-mm og ivy-4-mm í töflunni eru módelaauðkenni sem eru ekki innifalin í vörulýsingunum hér að ofan. Í skjalinu um API-köll kemur fram hvaða leið hver kalllykill tilheyrir.

CLEVI

Tungumál og svæði

Tungumál sem hafa verið þýdd með vélþýðingu eru merkt. Aðgengi fylgir útgefnum vefpakka.

136 tungumál

Mælt með

1

Austur-Asía

7

Suðaustur-Asía

11

Suður-Asía

18

Mið-Asía

5

Miðausturlönd og Kákasus

10

Vestur-Evrópa og Suður-Evrópa

16

Bretland og Írland

4

Norður-Evrópa

10

Mið-Evrópa og Balkanskaginn

14

Austur-Evrópa

5

Austur-Afríka

8

Vestur-Afríka og Mið-Afríka

9

Suðurhluti Afríku

8

Ameríka

5

Eyjaálfa

5