Salesforce, Nvidia Nemotron으로 자체 추론 모델 만들고 가중치도 직접 쥐었다

Koa는 CRM 작업에서 주요 모델과 대등하면서 오류는 3분의 1 수준이라고 Salesforce는 밝혔다

|4분 읽기0
Salesforce Tower in San Francisco, where the company opened Dreamforce 2026 by announcing Koa, its first in-house CRM reasoning model
Salesforce Tower in San Francisco, where the company opened Dreamforce 2026 by announcing Koa, its first in-house CRM reasoning model

Salesforce와 Nvidia가 9월 15일 샌프란시스코에서 개막한 드림포스에서 Koa를 공개했다. Salesforce의 첫 추론 모델로, Nvidia의 오픈웨이트 모델 Nemotron 3 Super를 후속 학습해 만들었고 실행은 전부 Salesforce 자체 인프라 안에서 이뤄진다. Salesforce가 프런티어 연구소로부터 추론 능력을 빌려 쓰던 방식을 접고 직접 만든 첫 사례다.

핵심 요약

  • Koa는 Nvidia Nemotron 3 Super를 기반으로, Salesforce가 27년간 축적한 CRM 구축 사례를 본떠 만든 합성 데이터로 후속 학습했다. 학습 데이터에 고객 데이터는 들어가지 않았다.
  • Salesforce 자체 CRM 벤치마크에서 Koa는 CRM 작업 성능이 주요 모델과 대등하거나 그 이상이면서 오류는 3분의 1 수준이었다.
  • 현재 1-800Accountant, Baxter Credit Union, Engine, Formula 1, UChicago Medicine, Xero가 파일럿으로 쓰고 있으며 정식 출시는 2026년 겨울 미국 리전부터다.

Salesforce가 추론을 빌려 쓰지 않기로 한 이유

Agentforce는 고객사가 케이스 분배나 일정 예약 같은 반복 업무용 AI 에이전트를 조립하는 플랫폼이다. 여기에는 이미 작고 용도가 정해진 모델 제품군이 올라가 있었다. 비어 있던 자리가 추론이었다. 에이전트가 장시간 이어지거나 여러 단계를 거치는 문제에 부딪히면 Agentforce의 모델 게이트웨이는 해당 프롬프트를 Claude나 ChatGPT로 넘겼다.

Salesforce의 AI 총괄 부사장 제이예시 고빈다라잔은 TechCrunch에 자체 엔터프라이즈급 추론 모델을 오래전부터 만들고 싶었지만 출발점으로 쓸 만한 기반이 없었다고 말했다. 그가 꼽은 Nemotron의 장점은 미국에서 호스팅되고, 최신 수준의 성능을 내면서, 무엇으로 학습했는지가 투명하다는 점이다. 그는 학습 데이터를 알 수 없다며 알리바바의 Qwen을 대비 사례로 직접 언급했다.

고객 데이터 없이 학습한 방법

Salesforce의 고객 기록은 한 건도 쓰지 않았다. 대신 제조, 금융 서비스, 의료, 여행 등 14개 넘는 산업을 아우르는 합성 시나리오를 생성했다. 각 시나리오는 지원 창구에 화를 내며 전화한 고객, 거래를 성사시키려는 영업 담당자 같은 페르소나와 과제를 짝지은 뒤, 에이전트가 그 과제를 끝내기까지 밟아야 할 동작과 도구 호출의 순서를 그대로 지정했다.

후속 학습은 지도 파인튜닝과 Group Relative Policy Optimization을 쓴 강화학습을 결합했고, Nvidia의 NeMo RL·NeMo Gym·NeMo AutoModel 스택 위에서 돌렸다. Salesforce는 과제 범위를 좁힌 것이 오류 격차를 만들어 냈다고 설명한다. 모델이 정답을 내놓는 법만이 아니라 목표에 이르는 동작을 순서대로 배열하는 법까지 익혔다는 것이다.

기업 고객에게 달라지는 것

내세우는 강점은 성능 자체가 아니라 통제권과 비용이다. Salesforce가 가중치를 쥐고 후속 학습과 추론을 모두 자사 신뢰 경계 안에서 수행하므로, 요청을 처리하는 동안 고객 데이터가 밖으로 나가지 않는다. Koa는 한정된 CRM 동작에 맞춰 조율된 모델이라 같은 작업을 범용 프런티어 모델로 넘길 때보다 토큰도 적게 쓴다.

Nvidia의 엔터프라이즈 생성형 AI 소프트웨어 부사장 카리 앤 브리스키는 Nemotron의 추론 아키텍처가 기업이 동시에 필요로 하는 조합, 즉 주권적 배포와 빠른 첫 토큰 응답, 효율적인 추론 비용 구조를 제공한다고 설명했다. 마크 베니오프는 더 직설적이었다. Salesforce의 가장 값진 자산은 플랫폼이 아니라 기업 비즈니스가 어떻게 돌아가는지에 대해 쌓아 온 지식이었고, Koa가 그 지식을 모델 안으로 옮겨 넣는다는 것이다.

같은 협력은 Salesforce의 공공 부문 조직 Missionforce로도 이어진다. 여기서는 Nemotron 기반 모델이 정부 조달, 공급업체 관리, 물류 업무를 위해 프라이빗 클라우드와 기밀 네트워크, 완전 망분리 시스템에 배치되고 있다.

전망

Salesforce가 연구소들과 관계를 끊는 것은 아니다. 며칠 앞서 Anthropic과 함께 Claudeforce를 발표해, 기록은 Salesforce 시스템에 남겨 둔 채 Claude를 인터페이스로 쓸 수 있게 했다. Koa는 게이트웨이의 또 하나의 선택지로 자리 잡을 뿐 게이트웨이를 대체하지는 않는다. 다만 방향만큼은 분명하다. Nvidia의 오픈 모델이 기업 에이전트 스택 아래에 계속 깔리는 흐름과도 맞아떨어진다. 에이전트 비용을 낮추려고 내놓은 30B Nemotron과 라우터 조합이 같은 예다. Koa의 정식 출시는 2026년 겨울이고, Missionforce Operations는 이미 정식 제공 중이며 후속 학습된 Nvidia 모델은 10월부터 일부 고객에게 열린다.

자주 묻는 질문

Koa는 오픈소스인가?

아니다. Koa는 Nvidia의 오픈웨이트 모델 Nemotron 3 Super를 기반으로 만들었지만, 후속 학습 결과물은 공개되지 않는다. Salesforce가 가중치를 통제하고 학습과 추론을 모두 자사 인프라에서 돌리며, 고객은 모델을 내려받는 대신 Agentforce를 통해 쓴다.

Koa 학습에 Salesforce 고객 데이터가 쓰였나?

Salesforce는 쓰이지 않았다고 밝혔다. 학습 말뭉치는 산업별로 CRM 업무가 실제로 전개되는 방식을 본뜬 합성 시나리오만으로 구성했다. 회사는 이 점을 Koa가 한 고객의 데이터를 다른 고객에게 흘릴 수 없는 이유로 제시한다.

Koa는 언제부터 쓸 수 있나?

1-800Accountant, Baxter Credit Union, Engine, Formula 1, UChicago Medicine, Xero 등 선정된 파일럿 고객은 이미 Agentforce 안에서 쓰고 있다. 정식 출시는 2026년 겨울 미국 리전에서 이뤄질 예정이다.

이 기사에 대한 반응을 남겨주세요!

SJ
로딩 중...

관련 기사

미 15개 주 법무장관, Hugging Face 침해 사고 두고 OpenAI에 해명 요구
AI & Machine Learning

미 15개 주 법무장관, Hugging Face 침해 사고 두고 OpenAI에 해명 요구

미국 15개 주 법무장관이 Hugging Face 침해 사고와 관련해 OpenAI에 기록 공개와 AI 사이버 평가 안전장치 강화를 요구했습니다.

Seung Jung41일 전
애플, 시리의 상시 청취가 프라이버시를 지키는 방식 공개
AI & Machine Learning

애플, 시리의 상시 청취가 프라이버시를 지키는 방식 공개

애플이 공개한 프라이버시 문서는 시리 오디오 인텔리전스가 주변 소리를 듣는 동안 원본 음성을 S11 칩의 시큐어 엑스클레이브 안에 가둬 두는 방식을 설명한다.

Seung Jung7일 전
인간 멸종 위험 경고하며 Anthropic 떠난 연구원, 안전 책임자도 공개 동조
AI & Machine Learning

인간 멸종 위험 경고하며 Anthropic 떠난 연구원, 안전 책임자도 공개 동조

Jacob Coxon이 멸종 위험을 이유로 Anthropic을 떠났다. 회사의 정렬 스트레스 테스트 책임자는 공개적으로 동의하며 그 확률을 10% 이상으로 봤다.

Seung Jung7일 전
200GB의 질문: 모델 가중치 중 정말 GPU에 올라가야 하는 것은 무엇인가
AI & Machine Learning

200GB의 질문: 모델 가중치 중 정말 GPU에 올라가야 하는 것은 무엇인가

DeepSeek V4.1 Flash는 763GB가 아니라 567GB의 GPU 메모리로 돌아간다. 가중치 1960억 개가 시스템 RAM에서 실행되도록 설계됐기 때문이다.

Seung Jung6일 전
Anthropic, 2억 건 규모 증류 보고서에서 Alibaba·Moonshot·DeepSeek 지목
AI & Machine Learning

Anthropic, 2억 건 규모 증류 보고서에서 Alibaba·Moonshot·DeepSeek 지목

Anthropic은 다섯 갈래 작전이 추론 능력을 베끼려 약 2억 건의 Claude 대화를 소모했고, Moonshot과 DeepSeek은 실제 고객 트래픽까지 넘겼다고 밝혔다.

Seung Jung6일 전
Anthropic, 외부 평가자 사내 상주시킨다… 아모데이 "프론티어 속도를 조절하자"
AI & Machine Learning

Anthropic, 외부 평가자 사내 상주시킨다… 아모데이 "프론티어 속도를 조절하자"

Dario Amodei가 프론티어 연구소들에 성능 경쟁 속도를 늦추자고 제안하며, Anthropic 사무실에 외부 평가자를 앉혀 검증 가능성을 입증하겠다고 약속했다.

Seung Jung4일 전