Pangaea en Emet: AI die internationaal werk begrijpt

Vandaag lanceren we Emet, ons nieuwe AI-lab, en Pangaea, onze modelfamilie voor internationaal werken.

Waarom? AI heeft misschien toegang gehad tot het hele internet, maar heeft nog nooit een salarisadministratie of bedrijf gerund.

Het beste AI-model voert slechts 49% van de praktijktaken rond salarisadministratie volledig correct uit. Bij vragen over internationaal werken, zoals opzegtermijnen of wie wettelijk aan het werk mag, heeft het beste model slechts 75% van de feiten juist, zelfs met een zoekfunctie. Dat lijkt misschien goed genoeg. Maar de fouten kunnen een loonbetaling of contract flink in de war schoppen.

De loonverwerkingssystemen van Deel bouwen voort op tientallen jaren ervaring met salarisadministratie, HR en naleving van wet- en regelgeving, inmiddels in meer dan 150 landen. Die expertise vind je niet op het internet. Daarom hebben we Emet ontwikkeld: om die kennis aan het werk te zetten.

Emet is ons AI-lab voor modelevaluatie en -training, gespecialiseerd in de dagelijkse bedrijfsvoering: salarisadministratie, HR, naleving van wet- en regelgeving, juridische zaken en financiën. De experts zijn specialisten uit de praktijk, afkomstig uit de eigen teams van Deel en het wereldwijde netwerk. Deel zoekt ze, controleert hun expertise en betaalt ze. Zij bepalen hoe echte bedrijfstaken eruitzien en wat nodig is om ze goed uit te voeren. Emet zet die kennis om in openbare benchmarks en trainingsdata, te beginnen met salarisadministratie en internationaal werken. Emet staat open voor iedere modelontwikkelaar.

Pangaea is het eerste bewijs van wat Emet kan betekenen. Het is de LLM-familie van Deel voor internationaal werken: mensen aannemen, betalen en personeelsbeheer in meer dan 150 landen. De modellen zijn gebaseerd op toonaangevende modellen met openbaar beschikbare gewichten en getraind met de kennisbank van Deel en door experts samengestelde data van Emet. Persoonsgegevens en klantgegevens worden daar nooit voor gebruikt. Pangaea wordt geleidelijk het belangrijkste model achter AI bij Deel.

Emet: hoe bepalen experts wat klopt?

Een snel antwoord is alleen waardevol als het klopt. De specialisten van Emet zetten hun kennis om in twee dingen: openbare benchmarks die laten zien waar AI tekortschiet, en trainingsdata die AI helpen het werk goed uit te voeren.

Die benchmarks heten EmBench. Elk model, ook dat van ons, wordt beoordeeld aan de hand van antwoorden van experts. De eerste twee benchmarks zijn:

• EmBench Payroll. 295 praktijktaken rond salarisadministratie in 8 landen, ontwikkeld met 29 lokale salarisspecialisten. Het beste model voldoet aan 90% van hun criteria, maar voert slechts 49% van de taken volledig correct uit.

• EmBench Global Work. 601 vragen over internationaal werken, van opzegtermijnen tot wie wettelijk aan het werk mag, waarbij elk feit afzonderlijk wordt beoordeeld. Het beste model heeft, met zoekfunctie, 75% van de feiten juist.

Waarom dit voor jou belangrijk is. Je team gebruikt misschien al AI voor vragen over HR en salarisadministratie. EmBench laat zien wanneer je daarop kunt vertrouwen en wanneer nog niet. Pangaea staat op dezelfde openbare ranglijsten, dus iedereen kan onze resultaten controleren.

Hoe geeft Pangaea sneller antwoord, direct in Deel?

Pangaea wordt het belangrijkste model achter de AI binnen Deel. Dit verandert er voor jouw team.

• Snellere antwoorden over internationaal werken. Stel Deel een vraag over opzegtermijnen, verlofregelingen, personeel aannemen in een nieuw land of salarisadministratie. Je krijgt dan binnen ongeveer 8 seconden een volledig antwoord. Toonaangevende AI-modellen met een zoekfunctie hadden in onze tests tot 28 seconden nodig.

• Antwoorden getoetst aan de maatstaven van experts. Lokale specialisten in salarisadministratie, compliance en HR bepalen waaraan een correct antwoord moet voldoen. Pangaea wordt daaraan getoetst en de resultaten zijn openbaar.

• Je gegevens blijven van jou. Pangaea wordt nooit getraind met salaris- of HR-gegevens van klanten.

• AI blijft inbegrepen. Pangaea geeft antwoord tegen een fractie van de kosten van toonaangevende AI-modellen. Zo kunnen we AI inbegrepen houden in je Deel-abonnement, zonder kosten per vraag.

Je blijft Deel op dezelfde manier gebruiken. Het wordt alleen sneller.

Wat kunnen de eerste twee Pangaea-modellen?

Pangaea K1: Global Work. K1 kent de regels voor grensoverschrijdend werken: opzegtermijnen, verlofregelingen en personeel aannemen in een nieuw land. Het model is getraind met de kennisbank van Deel, die meer dan 43.500 pagina’s bevat. Daardoor antwoordt het vanuit bestaande kennis in plaats van informatie op te zoeken. Op EmBench Global Work scoort K1 op basis van interne kennis binnen vijf punten van het best presterende model dat een zoekfunctie gebruikt, en antwoordt het tot drie keer sneller.

Pangaea P1: Payroll. P1 heeft kennis van salarisadministratie in verschillende landen, waar één gemist detail al tot een onjuiste loonbetaling kan leiden. Het model is getraind met salarisgegevens die zijn samengesteld door de lokale specialisten van Emet. Bij de 110 moeilijkste taken in EmBench Payroll zorgde die training ervoor dat P1 aan 61% van de criteria voldeed, tegenover 55% daarvoor. De kosten lagen daarbij ongeveer 40 keer lager dan bij het best presterende model.

Hoe testen we eerst onze eigen AI bij Deel?

Bij Deel testen we AI eerst op ons eigen werk. De specialisten van Emet controleren wat de AI doet, sporen fouten op en zetten die om in trainingsgegevens voor de volgende versie. Emet mat elke stap: door training met de kennisbank van Deel steeg het percentage correcte feiten in antwoorden van K1 op basis van interne kennis van 19% naar 70%.

Zo voldoet de AI die jouw team in Deel gebruikt aan de maatstaven van experts die dit werk dagelijks doen.

Wat is de volgende stap?

Pangaea wordt steeds sneller en nauwkeuriger. Emet gaat benchmarks toevoegen voor meer bedrijfsprocessen, te beginnen met uitzonderingen bij betalingsreconciliatie en verkooptaken. Ook ontwikkelt Emet omgevingen waarin AI-agenten echte bedrijfstaken van begin tot eind oefenen. Het doel blijft hetzelfde: AI die je werk goed uitvoert, zodat je medewerkers zich kunnen richten op de beslissingen die ertoe doen.