Werkwijze AI-collega’s

Eerst bewijzen.Dan pas zelf.

We werken elke dag met AI-agents. Maar geen agent krijgt bij ons zomaar werk in handen. Per taak moet hij laten zien dat hij die structureel goed doet. Pas dan mag hij hem zelfstandig uitvoeren.

Het principe

Iedereen kan een AI-agent bouwen. De vraag is welke je toelaat tot je bedrijf. Je geeft een nieuwe collega op dag één ook niet de sleutels van alles.

Een agent die goed praat, is nog geen agent die goed werkt. Wij kijken niet of hij overtuigend klinkt. We kijken of hij de taak begrijpt, zijn grens kent, veilig handelt en dat volhoudt als het druk wordt.

Per taak, niet per agent

Vertrouwen geef je niet aan een agent als geheel. Je geeft het per taak. Dezelfde agent kan het ene werk al zelfstandig doen en bij het andere werk nog naast een mens meekijken.

Voorbeeld · één AI-collega, vijf taken
  • Mail bij het juiste dossier zetten

    Bewezen op honderden mails, steekproef blijft.

  • Dubbele contactpersonen samenvoegen

    Doet het zelf, een mens kijkt een deel na.

  • Antwoord op een standaardvraag

    Schrijft het concept, een mens verstuurt.

  • Afspraak voorstellen

    Kiest momenten uit de agenda, een mens bevestigt.

  • Offerte opstellen

    Kijkt mee en leert. Nog geen eigen voorstel.

De toelatingsprocedure

Vijf stappen voordathij alleen mag.

  1. 01

    De taak afbakenen

    We schrijven op wat de taak is, waar de grens ligt en wanneer het resultaat goed is. Die lat ligt vast voordat de agent begint, zodat we hem niet achteraf verleggen.

  2. 02

    De toelatingstoets

    De agent doet de taak op een vaste set gevallen uit de praktijk, inclusief de lastige uitzonderingen. Zijn score moet boven de drempel komen die we vooraf hebben vastgelegd.

  3. 03

    Meedraaien

    In het echte werk maakt hij voorstellen en beslist een mens. We tellen wat er met elk voorstel gebeurt: ongewijzigd gebruikt, licht aangepast, herschreven of weggegooid.

  4. 04

    Zelfstandig, voor die ene taak

    Klopt dat beeld structureel, dan mag hij die taak zelf uitvoeren. Alleen die taak. Steekproeven en logging blijven, en elke stap is terug te lezen.

  5. 05

    Opnieuw examen

    Verandert het model, de werkwijze of de gegevens waarmee hij werkt, dan vervalt de toelating. Hij doet het examen opnieuw voordat hij weer zelfstandig verder mag.

Niet geslaagd? Dan verbeteren we de werkwijze of de agent en toetsen we opnieuw. Tot die tijd doet een mens het werk, met de agent als hulp.

Wat een goede agent zegt

  • “Dit weet ik niet zeker.”
  • “Mag ik dit eerst controleren?”
  • “Hier moet een mens naar kijken.”

De beste kandidaat heeft niet overal een antwoord op. Hij herkent waar zijn taak ophoudt en geeft het werk dan terug. Ook dat toetsen we: een agent die doorgaat waar hij had moeten stoppen, zakt.

Wat we niet beloven

Een toelating geldt voor één taak, in één omgeving, met één versie van het model. Het is geen garantie dat er nooit iets misgaat. Daarom blijft alles gelogd, is elke beslissing terug te voeren op de bron en blijft een mens verantwoordelijk voor wat er naar buiten gaat.

De toelating is onze eigen kwaliteitseis, geen keurmerk van een externe partij.

Meer over AI-collega’s

Welke taakmag als eerste?

Plan een gesprek. We kijken welk werk bij jou in aanmerking komt en wat een agent moet laten zien voordat hij het zelf mag doen.