För att veta om en AI-agent gör nytta behöver ni följa ett litet antal mått. Men fler mått är inte bättre. Ett mått som ser bra ut kan dölja ett problem, och ett som ser dåligt ut kan ha en enkel förklaring. Den här texten går igenom de mått som oftast är användbara, hur de ska tolkas och vad ni ska göra med dem. Här finns inga riktvärden, eftersom rätt nivå beror på er verksamhet. Det som räknas är hur ni utvecklas mot er egen utgångspunkt.
Börja med en utgångspunkt
Ett mått utan jämförelse säger lite. Innan ni startar, mät hur det ser ut idag, med samma metod som ni sedan ska använda:
- hur många förfrågningar som kommer in, per kanal
- hur stor del som är återkommande frågor
- hur lång tid en sådan fråga tar att besvara
- hur lång tid det går till första svar
- hur många förfrågningar som blir obesvarade
Utan den här utgångspunkten kan ni inte skilja en förbättring från en slump. Om ni inte har den, börja med att samla den. Det är den mest värdefulla delen av hela mätningen.
Fem mått som oftast är värda att följa
Volym
Antal konversationer per vecka eller månad. Tolka förändringen tillsammans med trafik på kanalen och kundutfall. Hög volym är inget kvalitetsmått i sig: en kampanj, en ändring på webbplatsen eller en förvirrande text kan öka den utan att något blivit bättre.
Svarskvalitet
Det här måttet kräver att en människa läser. Ta ett stickprov av konversationer regelbundet och bedöm om kunden fick ett korrekt och användbart svar. Notera fel, felaktiga antaganden och luckor i kunskapen. Det går inte att ersätta med ett automatiskt tal, och det är ofta det som ger mest att åtgärda. Hur ni håller kunskapen aktuell beskrivs i underhåll av kunskapsbasen.
Löst utan överlämning
Andelen konversationer som avslutas utan att en människa behövdes. Men var försiktiga: ett lågt antal överlämningar bevisar inte att frågan blev löst eller att tid sparades. Kunden kan ha gett upp. Kontrollera med stickprov att det blev ett användbart svar.
Överlämningar
Följ varför ärenden går till en person och om mottagaren får tillräckligt med sammanhang. Det finns ingen allmän normalnivå. Rätt nivå beror på risk, uppgift och kundens behov. En agent som lämnar över rätt ärenden i rätt läge gör sitt jobb, även om andelen är hög. Läs om när AI ska eskalera till människa och hur överlämning till personal fungerar när den är konfigurerad.
Genomförda åtgärder
Där agenten kan utföra något, till exempel ta emot en bokning, räkna de som faktiskt genomfördes. Jämför mot er utgångspunkt och ta med avbokningar och uteblivna besök, om det är relevant. Tillgängliga åtgärder beror på plattform, plan och konfiguration, så mät bara det ni faktiskt satt upp. Se integrationer för vad som gäller.
Mått som lätt vilseleder
| Mått | Varför det kan vilseleda | Komplettera med |
|---|---|---|
| Antal konversationer | Mer volym är inte bättre kvalitet | Stickprov på svar |
| Låg andel överlämningar | Kunden kan ha gett upp | Granskning av avslutade dialoger |
| Kort handläggningstid | Kan betyda ett ofullständigt svar | Om frågan blev löst |
| Hög andel överlämningar | Kan vara rätt om ärendena är känsliga | Orsaker och sammanhang som följde med |
Tid och kostnad
För att veta om det sparar tid, mät samma sak före och efter: tid som läggs på återkommande frågor, på uppföljning av överlämnade ärenden och på att underhålla kunskapen. Räkna in all tid, även er egen. Kostnadssidan beskrivs i vad kostar en AI-agent, och i när det lönar sig att automatisera kundservice finns ett sätt att räkna med era egna siffror. Behandla resultatet som en kalkyl och inte som ett löfte.
Gör mätningen till en rutin
- Bestäm vilka få mått ni följer. Börja smalt och lägg till först när ni vet vad ni ska använda dem till.
- Läs konversationer regelbundet. Veckovis under piloten, därefter i en takt som passar volymen.
- Åtgärda det ni hittar. Fel och luckor i kunskapen är det snabbaste sättet att förbättra utfallet.
- Jämför mot utgångspunkten. Samma period, samma metod.
- Granska igen vid förändringar. Nya kanaler, ny kunskap eller ändrade gränser kan ändra bilden.
Innan lansering hjälper ett test med riktiga frågor er att få en första bild av kvaliteten. Fler sätt att räkna på nyttan finns i guiderna. Vill ni gå igenom vilka mått som passar er kan ni kontakta oss.
