Vi presenterar Pangaea och Emet: AI som kan reglerna för globalt arbete

I dag lanserar vi Emet, vårt nya AI-labb, och Pangaea, vår familj av modeller för globalt arbete.

Varför? AI må ha haft tillgång till hela internet, men den har aldrig skött lönehantering eller drivit ett företag.

Den bästa AI-modellen löser bara 49 % av verkliga löneuppgifter fullt ut. På frågor om globalt arbete, som uppsägningstider eller vem som har laglig rätt att börja ett jobb, får den bästa modellen 75 % av faktauppgifterna rätt, även med sökfunktion. Tillräckligt nära för att verka rätt. Tillräckligt fel för att orsaka problem med en löneutbetalning eller ett avtal.

Bakom Deels lönemotorer finns årtionden av erfarenhet av lönehantering, HR och regelefterlevnad, nu i över 150 länder. Den expertisen finns inte på internet. Därför skapade vi Emet för att omsätta den i praktiken.

Emet är vårt AI-labb för utvärdering och träning av modeller, med fokus på hur företag fungerar: lönehantering, HR, regelefterlevnad, juridik och ekonomi. Experterna är yrkesverksamma specialister från Deels egna team och globala nätverk. Deel hittar dem, verifierar deras kompetens och betalar dem. De definierar hur verkliga arbetsuppgifter i företag ser ut och vad som krävs för att utföra dem korrekt. Emet omvandlar detta till offentliga jämförelsetester och träningsdata, med lönehantering och globalt arbete som första områden. Emet är öppet för alla som utvecklar modeller.

Pangaea är det första beviset på vad Emet kan åstadkomma. Det är Deels familj av stora språkmodeller (LLM:er) för globalt arbete: att anställa, betala och hantera personal i över 150 länder. Modellerna bygger på ledande modeller med öppna modellvikter och tränas på Deels kunskapsbas och data framtagna av experter på Emet, aldrig på personuppgifter eller kunddata. Pangaea införs successivt som huvudmodell bakom AI hos Deel.

Emet: hur avgör experterna vad som är rätt?

Snabba svar har bara ett värde om de är rätt. Specialisterna på Emet omvandlar sin kunskap till två saker: offentliga jämförelsetester som visar var AI brister och träningsdata som hjälper modellerna att klara uppgifterna.

Jämförelsetesterna heter EmBench. Alla modeller, även våra egna, bedöms utifrån experternas svar. De två första testerna är:

• EmBench Payroll. 295 verkliga löneuppgifter i 8 länder, framtagna tillsammans med 29 lokala lönespecialister. Den bästa modellen uppfyller 90 % av deras kriterier men löser bara 49 % av uppgifterna fullt ut.

• EmBench Global Work. 601 frågor om arbete över landsgränserna, från uppsägningstider till vem som har laglig rätt att börja arbeta. Svaren bedöms faktauppgift för faktauppgift. Den bästa modellen får 75 % av faktauppgifterna rätt, även med sökfunktion.

Därför är det här viktigt för dig. Ditt team kanske redan använder AI för frågor om HR och lönehantering. EmBench visar när du kan lita på svaren och när de ännu inte håller måttet. Pangaea finns på samma offentliga resultatlistor, så vem som helst kan granska våra resultat.

Hur ger Pangaea snabbare svar direkt i Deel?

När Pangaea blir huvudmodellen bakom AI i Deel innebär det här följande för ditt team.

• Snabbare svar om internationellt arbete. Fråga Deel om uppsägningstider, ledighetsregler, anställning i ett nytt land eller lönehantering, så får du ett fullständigt svar på ungefär 8 sekunder. I våra tester tog ledande AI-modeller med sökfunktion upp till 28 sekunder.

• Svar som måste uppfylla experternas krav. Lokala specialister inom lönehantering, regelefterlevnad och HR definierar vad ett korrekt svar ska innehålla. Pangaea testas mot dessa krav och resultaten är offentliga.

• Dina data förblir dina. Pangaea tränas aldrig på kundernas löne- eller HR-uppgifter.

• AI ingår även fortsättningsvis. Pangaea ger svar till en bråkdel av kostnaden för ledande AI-modeller. Det hjälper oss att fortsätta inkludera AI i ditt Deel-abonnemang, utan avgift per fråga.

Du använder Deel precis som vanligt. Det blir bara snabbare.

Vad kan de två första Pangaea-modellerna?

Pangaea K1: Internationellt arbete. K1 kan reglerna för arbete över landsgränser: uppsägningstider, ledighetsregler och anställning i ett nytt land. Modellen har tränats på Deels kunskapsbas med över 43 500 sidor och svarar därför utifrån sin inlärda kunskap i stället för att söka efter information. I EmBench Global Work hamnar K1 inom fem poäng från den bästa modellen med sökfunktion, men svarar utifrån sin inlärda kunskap och upp till tre gånger snabbare.

Pangaea P1: Lönehantering. P1 kan lönehantering i olika länder, där en enda missad detalj kan leda till fel lön. Modellen tränades på lönedata som tagits fram av Emets lokala specialister. På de 110 svåraste uppgifterna i EmBench Payroll ökade träningen andelen uppfyllda kriterier från 55 % till 61 %, till ungefär en fyrtiondel av kostnaden för den bästa modellen.

Hur har tekniken testats på Deels egen AI först?

På Deel testar vi först AI i vårt eget arbete. Emets specialister granskar vad den gör, upptäcker fel och omvandlar dem till träningsdata för nästa version. Emet mätte varje steg när träning på Deels kunskapsbas ökade andelen korrekta faktauppgifter i K1:s svar från 19 % till 70 %, utan att modellen behövde söka efter information.

Det innebär att den AI ditt team använder i Deel måste leva upp till de krav som ställs av experter som arbetar med de här frågorna varje dag.

Vad händer härnäst?

Pangaea ska fortsätta bli snabbare och mer träffsäker. Emet kommer att lägga till jämförelsetester för fler delar av företagens verksamhet, med början i avvikelsehantering vid betalningsavstämning och försäljningsuppgifter. Teamet kommer också att bygga miljöer där AI-agenter får öva på verkliga arbetsuppgifter från början till slut. Målet är detsamma: AI som utför arbetet korrekt, så att dina medarbetare kan fokusera på de beslut som verkligen spelar roll.