Developer guide

Modell

Modellsamandráttur

CLEVI-modellini eru býtt í tríggjar vørubólkar: CIP, sum tekur sær av almennari intelligens og arbeiðsautomatisering, Cosa, sum tekur sær av taluframleiðslu og talugreining, og Cova, sum tekur sær av upplýsingadrátti úr skjølum og myndum. Hvør vøra kann nýtast sjálvstøðugt ella knýtast saman í tænastur, sum fevna um skjalagreining, greining, arbeiðsútføring og taluvegleiðing.

VøraModel IDHøvuðsspesifikatiónirHøvuðsuppgáva
CIP-5.5-SMcip-5.5-sm24B~40B stillanligtArbeiðsautomatisering á edge-servarum og lokalt
CIP-5.5-IMcip-5.5-im360B · íntak 256K · úttak 64K · multimodaltAlmenn arbeiðsviðgerð. Leggur dent á svarferð og gjøgnumgongd
CIP-5.5-MMcip-5.5-mm800B · íntak 512K · úttak 64K · multimodaltGreining av longum samanhangum og loysing av samansettum trupulleikum
Cosa-Acosa-aTalusyntesa · avritan · sniðgeving · stroymingTaluframleiðsla við nágreiniligari syntesustýring
Cosa-Bcosa-bTalusyntesa · avritan · sniðgeving · stroymingVal av rødd og tillagað taluframleiðsla
Cosa ASRcosa-asrTalugreiningUmbroyting av taluinntaki til tekst
Covacova-1LLM-grundað sjónligt OCR til serligt endamálÚtdráttur av teksti, sniði og talvum umframt einføld myndalýsing

CIP

CIP tekur sær av almennari intelligens og arbeiðsautomatisering. Tað fevnir um cip-5.5-im og cip-5.5-mm, sum verða kallað gjøgnum ein gateway, og cip-5.5-sm, sum verður sett upp á edge-servarum og lokalt.

cip-5.5-im og cip-5.5-mm

Liðurcip-5.5-imcip-5.5-mm
Stødd360B800B
Ítaksmark256K512K
Mesta úttak64K64K
ÍtaksformTekstur og sjónligt tilfar (skjøl, skíggjamyndir, talvur og ritmyndir)Tekstur og sjónligt tilfar (gjøgnumgongur kodu, skjøl og skíggjatilfar í samhengi)
HøvuðsrættingViðger vanlig vitanararbeiði og menningararbeiði við denti á svarferð, kostnaðarvirkni og gjøgnumgongd.Viðger samansett arbeiði, sum savnar og greinir fleiri keldur og treytir og knýtir greiningarúrslit at veruligum arbeiði.
Endamál við longum ítakiGjøgnumgongur fleiri skjøl, kodufílur og samrøðusøgu í senn.Handfer umfatandi keldutilfar og arbeiðssøgu í senn og loysir agentarbeiði, har kanning, útføring og váttan ganga í fleiri stigum.

cip-5.5-im hóska til uppgávur við greiðum málum og avmarkaðum arbeiðsøki. Dømi eru at draga neyðugar upplýsingar úr givnum tilfari, skriva úrslit í ávísum sniði og broyta kotu í samsvari við krøv. Hámarkið á 64K útskrift verður brúkt til at skriva nágreiniligar frágreiðingar ella úrslit, sum eru sett saman av fleiri pørtum.

  • Menningarhjálp: Skrivar funktiónir og eginleikar, rættar avmarkaðar villur og fremur í samsvari við verandi mynstur.
  • Testframleiðsla: Ger drøg til testir og eftirkanningardømi grundað á krøv og íverksetan.
  • Skjalaviðgerð: Tekur sær av samandrátti, flokking, úrtøku av liðum, sniðumbroting og gerð av drøgum.
  • Multimodal greining: Metir um skermmyndir og talvur og myndrit í skjølum saman við viðkomandi frágreiðingum.
  • Samskiftislig arbeiðshjálp: Svarar spurningum við støði í arbeiðstilfari og skrivar neyðug úrslit.
  • Stórfílastýring: Verður brúkt til einstakar samandráttir av nógvum skjølum, flokking av umbønum og dátuumskapan.
  • Undiragentur: Tekur sær av greitt avmarkaðum undiruppgávum, so sum at kanna kotu, eftirkanna ávístar fílur og skipa tilfar.

Til dømis verður tað brúkt til at taka ímóti funktiónarkrøvum og viðkomandi kotu og skriva uppskot til broytingar, testir og frágreiðing um broytingarnar, ella til at flokka móttøkuskjøl og gera ein samandrátt til ábyrgdarpersónin.

cip-5.5-mm hóska til uppgávur, har neyðugt er at skilja sambandið millum upplýsingar og varðveita samanhangin í allari uppgávuni. Í menning verður sambandið millum krøv, sniðgeving, íverksetan og testir kannað, og í skjalagreining verða pástandir og grundgevingar, munir og mótsagnir í fleiri skjølum samanbornar.

  • Íverksetan av samansettum eginleikum: Broyta kotu, testir og skjøl í felag við atliti at sáttmálum og atburði hjá fleiri modulum.
  • Greining av stórum kodugrunni: Kanna kallingssambond, dátustreym og ávirkanarøki av broytingum.
  • Greining av orsøkum til brek: Samanbera loggar, uppseting, kotu og úrslit av koyring fyri at skipa hypotesur um orsøkir og mannagongdir til staðfestingar.
  • Stuðul til sniðgeving og avgerðir: Skipar krøv og avmarkingar og greinar ávirkanina av ymiskum íverksetingarstøðum.
  • Samanumtikin greining av fleiri skjølum: Skipar felags eyðkenni, munir og mótsagnir í frágreiðingum og tøkniligum skjølum við støði í grundgevingum.
  • Samantvinnaða multimodala eftirkanning: Tulkar tekst og sjónligt tilfar saman fyri at greina trupulleikar og krøv.
  • Fleirstigsagentur: Verður brúkt til uppgávur, sum fevna um kanning, ætlan, amboðskoyring og eftirkanning av úrslitum.
  • Skriving av fakligum skjølum: Skrivar tøkniligar frágreiðingar, sniðgevingaruppskot og nágreinilig eftirkanningarskjøl, sum taka hædd fyri fløktum treytum og grundgevingum.

Til dømis verður tað brúkt til at kanna viðkomandi kotur og loggar frá villum í fleiri tænastum saman, ella til arbeiði, sum fevnir um alt frá greining av krøvum til fjøltáttaðar funktiónir til íverkseting og eftirlit við úrslitum.

cip-5.5-sm

cip-5.5-sm fremur lokala inferens og sjálvvirkni av arbeiði á edge-nettænarum og í on-premises-umhvørvum. Tí støddin á modellinum kann stillast innan 24B~40B, kann uppsetingin veljast eftir roknitilfeinginum í útgerðini og neyðugu frammistöðuni á staðnum. Við at viðgera dátur nær staðnum, har tær verða skapaðar, verður tað brúkt til samantenging við lokalar skipanir og nýtslu av innanhýsis dátum, og um neyðugu modellini og amboðini verða sett upp lokalt, kann tað eisini rekast í umhvørvum við avmarkaðari uttanhýsis sambinding.

Tað hevur leiklutin at tulka upplýsingar, sum koma frá staðnum, og knýta tær at viðgerðarferlum. Tað flokkar loggar og umbønir, dregur neyðugar upplýsingar úr dátum og fremur endurtakandi arbeiði við samanknýttum innanhýsis amboðum og skriftum.

  • Viðgerð av hendingum á staðnum: Flokkar loggar og støðuupplýsingar frá útgerð og velur hendingar, sum skulu kannast.
  • Forviðgerð av dátum: Dregur høvuðspunkt úr arbeiðsskrásetingum og flokkar, merkir og normaliserar tær.
  • Beining av umbønum: Sendir móttiknar umbønir til ábyrgdarskipanina ella viðgerðarferlið.
  • Lokalt arbeiðsumboð: Fremur endurtakandi arbeiði við at sláa upp í innanhýsis skipanum og koyra skriftir.
  • On-premises arbeiðsstuðul: Svarar spurningum við støði í innanhýsis tilfari og skipar arbeiðsinnihald.
  • Stuðul til eftirfylgjandi greining: Velur tilfar, sum krevur eyka eftirkanning, og tekur saman um høvuðsinnihaldið.

Til dømis verður tað brúkt í einum arbeiðsgangi, har rakstrarloggar á einum virkisservara verða flokkaðir, viðkomandi søga verður sligin upp, og ein hendingaryvirlit verður skrivað til tann ábyrgdara.

Cosa

Cosa er ein røð av røddarvørum, sum umsetir tekst til talu, kennir inntalaða rødd sum tekst og skrásetur og endurnýtir ynsktar røddir. Tað verður brúkt til tænastuleiðbeining, innihaldsframleiðslu, atkomustuðul og røddargrensesnitt í samrøðuamboðum.

Røddarskapan verður røkt av cosa-a og cosa-b, meðan røddarkanning verður røkt av cosa-asr. cosa-a og cosa-b eru sjálvstøðug modell, sum veita hvør sítt úrval av røddum og syntesustillingum, og tey verða vald í sama tænastugrensesnitti. Funktiónirnar, sum bæði modellini veita felags, eru hesar:

  • Tekst-til-rødd: Ger inn skrivaðar setningar um til tal við valdu røddini.
  • Røddarkloning: Skráir eina rødd grundaða á eina tilvísingarupptøku, sum tú hevur loyvi at brúka, og ger nýggjar setningar um til tal.
  • Røddarsniðgeving: Ger og skrásetur eina rødd við at lýsa eginleikarnar, sum tú ynskir.
  • Endurnýtsla av rødd: Brúkar eina skrásetta rødd til seinni talframleiðslu.
  • Framleiðslustillingar: Stillar taluferð, mál og annað.
  • Streyming: Ger tekstin um til tal í brotum, so hvørt sum teksturin kemur inn, og sendir ljóðið út í røð.
  • Spælistýring: Stuðlar pause, endurtøku, steðgi og innlestri av eyka setningum.

Við stigvísari tekstinnlestri kanst tú byrja at spæla røddina, áðrenn alt svarið er liðugt. Meðan CIP skrivar svarið, kann tú skipa fyri eini tænastu, har Cosa lesur upp tey brotini, sum eru klár.

cosa-a

cosa-a stuðlar tekst-til-rødd, røddarkloning, røddarsniðgeving og streymandi útsending. Umframt grundleggjandi funksjónir sum at velja rødd, mál og taluferð, gevur hon fleiri stýrimøguleikar, eitt nú stillingar fyri tal av framleiðslustigum, vegleiðingarstyrki og framleiðslulongd. Hetta verður brúkt til at stilla inn undir røddarframleiðsluni og kanna úrslitið, ella til at brúka fleiri stillingar á sama handriti og velja besta úrslitið.

  • Ger vegleiðingar og fráboðanir til appir, sjálvavgreiðsluterminalar og arbeiðsskipanir um til tal.
  • Ger frálærutilfar og brúkaravegleiðingar um til rødd.
  • Ger frásagnir til video- og ljóðtilfar.
  • Ger endurtikið tilfar við skrásettari rødd.
  • Brúkar streymandi røddarútsending hjá samskiftisagentum.
  • Brúkar til røddarframleiðslu, har smálutastillingar verða tillagaðar.

cosa-b

cosa-b stuðlar vali av forstilltum røddum, lýsingargrundaðari røddarsniðgeving, kloning grundað á tilvísingarrødd og streymandi útsending. Tú kanst velja eina rødd úr egnum røddarlista ella skráseta eina nýggja rødd til tænastuna.

Til røddarkloning verða ein tilvísingarupptøka og samsvarandi tekstur brúkt. Tað ber eisini til at stuðla einum skrásetingararbeiði, har tilvísingarteksturin verður gjørdur við talgóðkenning, og skrásetta røddin verður endurnýtt í seinni talframleiðslu.

  • Setur upp røddar-persónleikan hjá tænastum og persónum.
  • Ger tillagaðar røddir við eini lýsing ella eini tilvísingarupptøku.
  • Ger brandvegleiðingar, persónsreplikker og frásagnir til tilfar um til tal.
  • Brúkar til røddarsvar hjá samskiftisagentum.
  • Ger broyttar vegleiðingar og handrit um til tal við somu rødd.

Tá tú velur millum cosa-a og cosa-b, skalt tú taka støði í ynsktu røddini, veruliga syntesuni og teimum stýrieindum, sum eru neyðugar.

Liðurcosa-acosa-b
SyntesustillingarUmframt rødd, mál og taluhraða eru eisini stillingar fyri talið á syntesustigum, styrkina á vegleiðingini og longdina á tí framleiddaFelags stillingar sum taluhraði og mál
Inntak til kloningEin tilvísingarupptøka, sum tú hevur loyvi at brúkaEin tilvísingarupptøka og samsvarandi tekstur. Undir skrásetingini ber til at mynda tilvísingartekstin við talugreining
LeikluturRøddaframleiðsla við nágreiniligari syntesustýringVal av rødd og framleiðsla av tillagaðari rødd

cosa-asr

cosa-asr umsetir inntakandi rødd til tekst. Tað skrásetir upptøkur ella umsetir fyrispurningar, sum koma inn sum rødd, til inntak, ið eftirfylgjandi arbeiðsskipanir kunnu viðgera.

  • Tekstskrivar røddarnotur og upptøkur.
  • Umsetur røddargrundaðar spurningar og arbeiðsumbønir til inntak.
  • Framleiðir tilvísingartekst til røddakloning.
  • Verður brúkt til viðgerð, sum heldur fram við samandrátti, flokking og leiting eftir tekstskriving.

Tá ið tú sendir tekstskrivingarúrslitið til CIP, heldur arbeiðið fram við samandrátti av innihaldinum, flokking av umbønum og gerð av arbeiðsdrøgum. Um tú syntetiserar úrslitið við cosa-a ella cosa-b, verður tað ein arbeiðstænastan við bæði røddarinnlestri og røddarúttaki.

Cova

cova-1 er ein LLM-grundaður modellur, sum er serliga ætlaður til sjónligan OCR. Hann kennir tekst aftur í skjølum og myndum, dregur uppseting og tabellbygnað út og gevur stuttar lýsingar av sjónligum elementum.

Hann umsetir skjøl, sum fólk lesa, til eitt snið, ið agentar og arbeiðsskipanir lættari kunnu brúka. Høvuðstekstur og tabellir verða tikin út sum skipað innihald, meðan myndir í skjølunum verða miðlaðar sum stuttar lýsingar. Soleiðis kunnu eftirfylgjandi agentar skilja bæði innihaldið og sjónliga samanhangin í skjalinum. Um tú fyrst brúkar úttikna tekstin og lýsingarnar til at fáa yvirlit yvir tilfarið og bara síðani metir um upprunamyndirnar, sum krevja nágreiniligari kanning, kanst tú skipa arbeiðsgongdina soleiðis, at nøgdin av upprunamyndum, sum verða sendar inn umaftur, minkar og konteksttoken verða spard.

FunktiónLýsing
TekstkenningTekstur verður tikin úr skjølum, sum verða skannað ella myndað.
Tulking av uppsetingInnihaldið verður býtt upp í blokkar við atliti at uppsetingini av skjalinum.
Upplýsingar um staðsetingStaðsetingin av kendu blokkunum verður givin, so úrdrátturin kann knýtast at upprunatekstinum.
Úrdráttur av talvuskipanInnihaldið í talvum verður skipað, so tað kann nýtast til leiting og dátaviðgerð.
Stutt myndalýsingInnihaldið í myndum og sjónligum lutum verður lýst stutt og gevur agentinum grundarlag til tulking.
Hagkvæm kontekstnýtslaUpplýsingar verða miðlaðar við denti á tekst, bygnað og myndalýsingar, so endurtikin innlesing av upprunamyndini verður minkað.
Útvalin nágreinilig greiningHetta hjálpir agentinum at meta um, hvørjar upprunamyndir skulu kannast nærri.
Umbroyting av skjalasniðiÚrslitini av kenn­ingini verða skipað sum HTML ella Markdown.
  • Stafræn gerð av skjølum: Pappírsskjøl og skannað tilfar verða umgjørd til tekstgrundað tilfar.
  • Móttøka av arbeiðsskjølum: Innihald verður tikið úr umsóknum, próvskjølum og frágreiðingum.
  • Viðgerð av talvudátum: Talvur í skjølum verða nýttar í eftirfylgjandi dátaviðgerð.
  • Fyrireiking til vitanarleiting: Myndir av skjølum og sjónligt tilfar verða umgjørd til leitanarbaran tekst og bygnað.
  • Sjálvvirkin skjalagjøgnumgongd: Úrdrátturin verður sendur til CIP, sum kannar liðir, ger samandrátt og samanber tilfar.
  • Bøtt um innlesing til agentar: Høvuðstekstur, talvur og myndalýsingar í longum skjølum verða skipað, so bert neyðugu upplýsingarnar verða miðlaðar.

Til dømis verður høvuðstekstur og talvur úr eini frágreiðing tikin út, samstundis sum ein innsett grafur verður lýstur sum ein grafur, ið vísir gongdina í ársfjórðingsligari sølu. Agenturin skilir við hesi lýsingini, at grafurin er til og hvat hann verður nýttur til, og kannar síðani upprunamyndina nærri, tá nágreinilig tøl ella gongdir eru neyðugar.

Samanbinding av vørubólkum

Tá vørur verða bundnar saman, kann fylgjandi arbeiðsgongd setast upp.

  • Skjalagrundað arbeiði: Cova tekur høvuðstekst, talvur og myndalýsingar út, CIP kannar útvaldar upprunamyndir eftir tørvi og ger greining og arbeiðsviðgerð, og Cosa miðlar úrslitini sum talu.
  • Talugrundað arbeiði: Cosa ASR umsetur taluboð til tekst, og cosa-a ella cosa-b lesur svarið, sum CIP hevur viðgjørt, upp.
  • Sjálvvirkni á staðnum: cip-5.5-sm flokkaðar dátur á staðnum og fremur lokalt arbeiði, meðan tilfar, ið krevur víðfevnda heildargreining, verður sent víðari til cip-5.5-im ella cip-5.5-mm.

Kall loyvd í gáttini

Planirnar hjá gateway áseta, hvørji kall eru loyvd fyri hvørja modell. Talvan niðanfyri vísir, hvørji øki planirnir LLM_FREE, TTS_FREE og STT_FREE lata upp fyri, og hesir planir verða sjálvvirkandi nýttir uttan umsókn. Modell, sum eru latin upp gjøgnum aðrar leiðir, eru ikki tikin við.

Modell-IDLoyvd kallGrundplan
cip-5.5-imanthropic.messages · chat.completions · chat.completions.batch · completions · responsesLLM_FREE
cip-5.5-im-chatanthropic.messages · chat.completions · chat.completions.batch · completions · responsesLLM_FREE
cip-5.5-mmanthropic.messages · chat.completions · chat.completions.batch · completions · responsesLLM_FREE
cip-5.5-mm-hanthropic.messages · chat.completions · chat.completions.batch · completions · responsesLLM_FREE
cosa-aaudio.speech · audio.speech.clone · voices · voices.designTTS_FREE
cosa-baudio.speech · audio.speech.clone · voices · voices.designTTS_FREE
cosa-ttsaudio.speech · audio.speech.clone · voices · voices.designTTS_FREE
cosa-asraudio.transcriptionsSTT_FREE
ivy-4-embeddingembeddingsLLM_FREE
ivy-4-embedding-mmembeddingsLLM_FREE
ivy-4-mmanthropic.messages · chat.completions · chat.completions.batch · completions · responsesLLM_FREE

cip-5.5-sm og cova-1 eru ikki í hesi plan-talvu. cip-5.5-im-chat, cip-5.5-mm-h, cosa-tts, ivy-4-embedding, ivy-4-embedding-mm og ivy-4-mm í talvuni eru model-ID, sum ikki eru við í omanfyri nevndu produktlýsingini. Í skjalinum um API-kall sæst, hvørja leið kallalykillin hoyrir til.

CLEVI

Mál og øki

Maskinýttar málútgávur eru merktar. Tøkið fylgir tí útgivna heimasíðupakkanum.

136 mál

Mælt til

1

Eysturasia

7

Útsynningsasia

11

Suðurasia

18

Miðasia

5

Miðeystur og Kaukasus

10

Vesturevropa og Suðurevropa

16

Stórabretland og Írland

4

Norðurevropa

10

Miðevropa og Balkan

14

Eysturevropa

5

Eysturafrika

8

Vesturafrika og Miðafrika

9

sunnari partur av Afrika

8

Amerika

5

Osiania

5