Pangaea와 Emet: 글로벌 업무의 규칙을 이해하는 AI를 만나보세요

오늘 Deel은 새로운 AI 연구소 Emet과 글로벌 업무를 위한 모델 제품군 Pangaea를 선보여요.

왜 만들었을까요? AI는 인터넷의 모든 정보에 접근했을지 몰라도, 직접 급여를 처리하거나 기업을 운영해 본 적은 없기 때문이에요.

최상위 AI 모델도 실제 급여 과제를 완전히 해결하는 비율은 49%에 불과해요. 통지 기간이나 합법적으로 일을 시작할 수 있는 대상 등 글로벌 업무 관련 질문에서는 검색 기능을 사용해도 사실 정확도가 75%에 그쳐요. 얼핏 보면 맞는 답처럼 보이지만, 급여 지급이나 계약에 문제를 일으키기에는 충분한 오류예요.

Deel의 급여 엔진에는 수십 년간 쌓아 온 급여, HR, 규정 준수 업무 경험이 담겨 있으며, 현재 150개 이상의 국가를 지원해요. 인터넷에서는 얻을 수 없는 전문성이에요. Deel은 이 전문성을 AI에 활용하기 위해 Emet을 만들었어요.

Emet은 기업 운영에 필요한 급여, HR, 규정 준수, 법무, 재무 분야에 특화된 AI 모델 평가·학습 연구소예요. Deel 내부 팀과 글로벌 네트워크의 현업 전문가들이 참여하며, Deel이 직접 이들을 발굴하고 전문성을 검증하며 보수를 지급해요. 이들은 실제 비즈니스 업무가 무엇이고, 이를 정확히 완수하려면 무엇이 필요한지 정의해요. Emet은 이를 공개 벤치마크와 학습 데이터로 발전시키며, 급여와 글로벌 업무부터 시작해요. Emet은 모든 모델 개발자에게 열려 있어요.

Pangaea는 Emet의 역량을 입증하는 첫 결과물이에요. 150개 이상의 국가에서 인재를 채용하고, 급여를 지급하고, 인력을 관리하는 글로벌 업무를 위한 Deel의 LLM 제품군이에요. 주요 오픈 웨이트 모델을 기반으로 구축했으며, Deel의 지식 베이스와 Emet 전문가들이 구축한 데이터로 학습해요. 개인 데이터나 고객 데이터는 학습에 일절 사용하지 않아요. Pangaea는 Deel의 AI를 구동하는 핵심 모델로 순차 도입되고 있어요.

Emet에서는 전문가들이 어떻게 정답의 기준을 정하나요?

빠른 답변도 정확해야 의미가 있어요. Emet의 전문가들은 자신의 지식을 두 가지로 발전시켜요. AI의 부족한 부분을 드러내는 공개 벤치마크와 AI가 업무를 제대로 수행하도록 돕는 학습 데이터예요.

이 벤치마크의 이름은 EmBench예요. Deel의 모델을 포함한 모든 모델을 전문가 답변을 기준으로 평가해요. 처음 선보이는 두 가지 벤치마크는 다음과 같아요.

• EmBench Payroll. 현지 급여 전문가 29명과 함께 구축한 8개국의 실제 급여 과제 295개로 구성돼요. 최상위 모델도 전문가들이 정한 평가 기준의 90%를 충족하지만, 완전히 해결한 과제는 49%에 불과해요.

• EmBench Global Work. 통지 기간부터 합법적으로 근무를 시작할 수 있는 대상까지, 국경을 넘는 고용에 관한 질문 601개를 사실 단위로 평가해요. 최상위 모델도 검색 기능을 사용했을 때 사실 정확도가 75%에 그쳤어요.

여러분의 팀에 왜 중요할까요? 이미 HR과 급여 관련 질문에 AI를 활용하고 계실 수도 있어요. EmBench는 어떤 영역에서 AI를 신뢰할 수 있고, 어떤 영역에서는 아직 어려운지 보여줘요. Pangaea도 동일한 공개 순위표에 올라 있어 누구나 성과를 확인하실 수 있어요.

Pangaea는 Deel에서 어떻게 더 빠른 답변을 제공하나요?

Pangaea가 Deel의 AI를 구동하는 핵심 모델로 자리 잡으면서 여러분의 팀은 다음과 같은 변화를 경험하시게 돼요.

• 글로벌 업무에 관한 더 빠른 답변. 통지 기간, 휴가 규정, 새로운 국가에서의 채용, 급여에 관해 Deel에 질문하시면 약 8초 만에 완전한 답변을 받으실 수 있어요. 자체 테스트에서 검색 기능을 사용하는 주요 AI 모델은 최대 28초가 걸렸어요.

• 전문가 기준으로 검증한 답변. 각국의 급여, 규정 준수, HR 전문가들이 정확한 답변의 기준을 정해요. Pangaea는 이 기준에 따라 평가받으며 결과는 공개돼요.

• 고객 데이터는 학습에 사용하지 않아요. Pangaea는 고객의 급여 기록이나 HR 기록으로 학습하지 않아요.

• AI는 계속 요금제에 포함돼요. Pangaea는 주요 AI 모델보다 훨씬 낮은 비용으로 답변을 제공해요. 덕분에 질문마다 별도 요금을 부과하지 않고 Deel 요금제에 AI를 계속 포함할 수 있어요.

Deel을 사용하시는 방식은 그대로예요. 속도만 더 빨라져요.

Pangaea의 첫 두 모델은 어떤 업무에 특화되어 있나요?

Pangaea K1: 글로벌 업무. K1은 통지 기간, 휴가 규정, 새로운 국가에서의 채용 등 국경을 넘는 고용에 필요한 규칙을 이해해요. 43,500페이지가 넘는 Deel의 지식 베이스로 학습해 검색하는 대신 이미 학습한 지식으로 답해요. EmBench Global Work에서 K1은 검색 없이 학습한 지식만으로 답하면서도 검색 기능을 사용하는 최상위 모델과의 점수 차이를 5점 이내로 좁혔고, 응답 속도는 최대 3배 빨랐어요.

Pangaea P1: 급여. P1은 작은 정보 하나만 놓쳐도 급여 오류가 발생할 수 있는 국가별 급여 업무를 이해해요. Emet의 현지 전문가들이 구축한 급여 데이터로 학습했어요. 이 학습을 통해 EmBench Payroll에서 가장 어려운 110개 과제의 평가 기준 충족률이 55%에서 61%로 높아졌고, 비용은 최상위 모델의 약 1/40 수준이었어요.

Deel의 AI로 먼저 검증한 성과는 무엇인가요?

Deel은 자체 업무에서 AI를 먼저 테스트해요. Emet의 전문가들은 AI의 작업 결과를 검토하고 오류를 찾아 다음 버전의 학습 데이터로 활용해요. Deel의 지식 베이스로 K1을 학습시키는 동안 Emet은 단계별 성과를 측정했어요. 그 결과, 검색 없이 학습한 지식만으로 답할 때 사실 정확도가 19%에서 70%로 높아졌어요.

따라서 여러분의 팀이 Deel에서 사용하는 AI에는 매일 해당 업무를 수행하는 전문가들의 기준이 적용돼요.

앞으로 무엇이 달라지나요?

Pangaea는 앞으로도 속도와 정확도를 높여 나갈 거예요. Emet은 결제 대사 예외 처리와 영업 업무를 시작으로 기업 운영의 더 많은 영역에 벤치마크를 추가할 예정이에요. 또한 AI 에이전트가 실제 비즈니스 업무를 처음부터 끝까지 연습할 수 있는 환경도 구축할 거예요. 목표는 변함없어요. AI가 업무를 정확히 처리해 직원들이 중요한 의사결정에 집중할 수 있도록 하는 거예요.