AI

2 분 소요

SERIES TypeSafe Jev 완전 정복 3 / 3 시리즈 전체 보기 →

Jev 시리즈 마지막 편입니다. 1편(전세계가 주목하는 AI ‘Jev’, 5분이면 이해합니다)에서 개념을, 2편(Jev, 진짜 8배 빠르고 76배 저렴할까?)에서 실측 성능을 봤다면, 이번 편은 유튜브 채널 찐AI“출력 비용 ZERO, AI 세계 게임 체인저로 등장한 Jev, 활용법 알아보기” 영상을 바탕으로 Jev의 내부 구조와 실제 코드, 그리고 활용 아이디어를 정리했습니다.

일반 모델과의 근본적인 차이

클로드 코드나 코덱스 같은 일반 모델은 입력을 받으면 비구조화된, 다양한 형태로 출력합니다. 토큰을 확률에 따라 순서대로 생성할 뿐, 출력 형태에 제약이 없습니다. Jev는 다릅니다. 입력이 들어오면 구조화되고 고정된 형태로만 출력합니다.

Jev가 받을 수 있는 질문 유형은 세 가지로 고정돼 있습니다.

  • Choice: 분석 대상(State)과 질문, 선택지가 주어지면 각 선택지를 고를 확률을 반환
  • Score: Choice와 비슷하지만 선택지가 “단순 문의 → 항의 → 강력 항의”처럼 스펙트럼 성격을 가짐
  • Noul: 하나의 질문지에 대해 참/거짓(True/False)만 확률로 반환

사용자가 제시한 선택지 안에서만 고르기 때문에, Jev는 타입세이프합니다. 사용자가 주지 않은 다른 답을 낼 확률이 애초에 없다는 뜻입니다.

실제 코드로 보기

Jev는 Python SDK를 제공합니다. typesafe_sdk에서 Choice, TypeSafeClient를 가져와서, State(판단 대상)와 질문·선택지를 딕셔너리로 넘기면 됩니다.

typesafe_sdk의 TypeSafeClient로 고객 문의를 department(Choice 타입)로 분류하는 Python 코드 예시

이 코드는 “신발 사이즈가 잘못 와서 10 사이즈로 교환하고 싶다”는 문의를 State로 넣고, department 질문에 Choice 타입으로 returns/shipping/billing 세 선택지를 준 예시입니다. 출력은 각 선택지의 확률값과 함께 confidence(모델이 얼마나 자신 있게 답했는지)가 같이 나옵니다.

Jev가 주목받는 세 가지 이유

1. 출력 형식이 보장된다. Sol이나 Astra 같은 모델도 구조화 출력 오류율이 1.43%, 0.83% 정도 있는데, Jev는 0%입니다. 다만 “환각이 없다”는 말은 제시된 선택지 밖으로 벗어나지 않는다는 뜻이지, 그 선택이 항상 정답이라는 의미는 아닙니다.

2. 비용 효율성. 공식 홈페이지의 벤치마크에 따르면, 4개 워크플로 평균 정확도·비용 그래프에서 Sol·Opus 같은 모델은 정확도는 높지만 비용이 훨씬 높습니다(X축은 로그 스케일).

TypeSafe·OpenAI·Anthropic·Fireworks 모델들의 정확도(Y축) 대 비용(X축, 로그 스케일) 산점도. Jev는 왼쪽 하단(정확도 약 68%, 비용 $0.0001대)에 위치

Jev의 정확도는 약 67.8%로 Opus 5보다는 낮지만 Terra와 비슷한 수준이고, 워크플로 1건 처리 비용은 $0.004 수준입니다. 입력 토큰 비용은 페이블 5.1 대비 약 238분의 1이고, 출력 비용은 “거의 무료”에 가깝습니다(선택지별 확률을 계산해야 하니 완전히 0은 아니지만, 무시할 만큼 작다는 의미).

3. 속도 효율성. 공식 홈페이지의 인보이스 프로세싱 벤치마크에서 OpenAI Sol 모델은 정확도 79.1%에 34초, Jev는 정확도 61.8%에 0.5초가 걸렸습니다. 시간은 약 70배, 비용은 약 200배 차이입니다.

가장 큰 장점: 병렬 처리

랭그래프나 n8n으로 워크플로를 만들면 보통 순차 처리입니다. 티켓 유형을 먼저 분류하고, 그 결과에 따라 다음 분류를 또 하고, 그 결과에 따라 또 다른 로직을 태우는 식입니다. Jev는 다릅니다. 티켓 유형, 선택지, 재현 가능성 여부 같은 질문들을 한 번에 병렬로 입력해서 한 번에 결과를 꺼낼 수 있습니다. 기존 워크플로가 순차 처리라면, Jev는 병렬 처리로 판단 속도를 극대화한다는 게 핵심입니다.

활용 시나리오

영상에서 소개되거나 제안된 활용 사례입니다.

  • 웹 자동화: 플레이라이트 같은 도구로 웹페이지의 엘리먼트 정보를 추출한 뒤, 어떤 엘리먼트를 클릭하고 어디에 입력해야 하는지를 Jev에 병렬로 판단시켜 매우 빠른 속도로 자동화를 수행하는 오픈소스가 이미 나와 있습니다.
  • 자동매매: 매수/매도/보류 세 가지 중 하나만 판단하면 되는 코인 자동매매 프로그램. Opus나 Sol보다 정확도는 떨어지지만 속도가 빠르므로 단타 판단용으로 적합할 수 있습니다.
  • 영상 편집: 타임스탬프가 있는 자막 파일을 기준으로 구간별로 “자를지 말지”만 판단하면 되는 작업이라, Jev를 쓰면 빠른 편집이 가능할 것으로 기대됩니다(다만 아직 이미지는 인식하지 못합니다).
  • 이메일 트리아지: 판단이 필요한 자동화 파이프라인이면 이메일뿐 아니라 어디든 적용 가능합니다.
  • 모델 정렬(가드레일): “PC 여유 공간을 확보해달라”는 요청에 AI가 중요 파일까지 삭제하려는 위험한 행동을 하려 할 때, 중간에 Jev가 끼어들어 사용자 의도와 일치하는지·위험하지 않은지를 판단하고 개입하게 할 수 있습니다.

현재 Jev는 텍스트 입력만 받지만, 나중에 이미지나 음성까지 입력받게 되면 판단 가능한 영역이 훨씬 넓어질 것으로 예상됩니다.


이것으로 Jev 3부작을 마칩니다. 요약하면, Jev는 대화나 창작이 아니라 “정해진 선택지 중 하나를 빠르게, 저렴하게 고르는” 일에 특화된 모델이고, 기존 워크플로에서 판단(라우팅) 단계만 Jev로 교체하는 것만으로도 상당한 시간·비용 절감을 기대할 수 있습니다.

// reading compass

이 글과 이어지는 경로

시리즈, 카테고리, 태그 겹침, 최신도를 점수화해 가까운 글일수록 중심에 배치합니다.

hover nodes or cards · click a node to pin
Next reads 0

    댓글남기기