Har ni infört en RAG-chattbot i tron att den automatiskt skulle bli företagets interna uppslagsverk, men övervakar ni den nu varje dag för att se till att den inte ljuger? Organisationens regler och manualer ändras ofta, men processen för att uppdatera AI:ns kunskap är så komplicerad att det lätt uppstår sådana situationer. I det ögonblick chattboten väljer fel dokument kan den, i stället för att effektivisera arbetet, orsaka stor förvirring genom att ge felaktig vägledning.
Det första problemet som måste kontrolleras är sökning efter felaktig information
Svarskvaliteten hos en RAG AI-chattbot beror i hög grad på hur exakt den hittar de dokument som är relevanta för frågan.
Även om användaren frågar om de senaste personalreglerna svarar AI:n utifrån innehållet i det dokument som valdes under sökningen, om ett äldre dokument väljs. Även om det genererade svaret innehåller en detaljerad förklaring kan det inte användas i det praktiska arbetet om underlaget är felaktigt.
Varför är det lättare att blanda ihop filer som bara skiljer sig åt i årtal?
Företagsregler och arbetsinstruktioner har ofta liknande titlar och samma övergripande struktur även efter en revidering. De flesta meningarna i personalreglerna för 2024 och 2026 är också desamma, medan endast vissa delar, såsom ikraftträdandedatum, antal semesterdagar och ansökningstid, brukar skilja sig åt.
Eftersom RAG hittar dokument med liknande innebörd som frågan bedömer den båda reglerna som mycket relevanta. Om dokumentens ikraftträdandedatum, version och tillämpningsstatus inte är tydligt åtskilda kan det därför hända att den väljer de tidigare reglerna som underlag för svaret.
Clevi Lens är utformat för att upptäcka även små förändringar i siffror och ge korrekt information.
Nu kan verksamhetens medarbetare enkelt hantera AI:ns kunskap själva, utan väntetid.
Tidigare behövde interna AI-system be utvecklare om uppdateringar och sedan vänta på att arbetet skulle bli klart.
Nu kan dock icke-utvecklare enkelt hantera AI:ns kunskap själva, utan väntetid.
I Clevi Lens kan verksamhetens medarbetare lägga till och ändra dokument i administrationsvyn eller undanta dem från sökningen. Även icke-utvecklare kan återspegla förändringar i arbetet när det behövs och kontrollera resultatet av tillämpningen.
Pålitlig intern AI hanteras kontinuerligt
RAG-chattboten måste uppdatera sin kunskap varje gång regler och manualer ändras. Genom att hantera statusen för tillämpningen av de senaste dokumenten och skilja dem från tidigare material kan chattboten ge svar som följer aktuella arbetsstandarder.
- Registrera de senaste reglerna och arbetsmanualerna
- Hantera ikraftträdandedatum och versioner för varje dokument
- Uteslut material som inte längre gäller från sökresultaten
- Uppdatera kunskapen med fokus på arbetsansvariga
- Kontrollera kunskapsstatusen som tillämpas i chattboten
Mer information om Clevi Lens funktioner finns på produktsidan nedan.