Jeva: System One Models from First Principles

arXiv:2610.18773 · 2026-10-14 공개 · arXiv · PDF

latency-reduction system-one-models null-aware permutation-invariant option-scalable cacheable decision-native shared-encoder

Abstract

System one models enable direct, low-latency decision-making. Yet recent practice of predicting an answer from serialized text does not, by itself, respect the structure of a decision problem. We argue that current designs underemphasize four important structural requirements. (i) null-aware: Models should distinguish answer absence from uncertainty among candidates; (ii) permutation-invariant: Reordering alternatives should not change the decision; (iii) option-scalable: Growing candidate sets should not require redefining the output space; (iv) cacheable: Request-independent computation over recurring alternatives should be reusable across requests. We introduce Jeva, a decision-native architecture that addresses these requirements jointly. A shared encoder independently represents the request and each option, while a compact decision stack refines only the request state against immutable option memory. Symmetric aggregation yields permutation-equivariant probabilities; shared scoring accommodates variable-size candidate sets. A separate coverage estimate distinguishes answer absence from candidate competition, enabling explicit null outcomes. Request-independent option representations and layer projections support reuse across newly assembled sets. These mechanisms unify Choice, Noul, and Score outputs. Across evaluations, Jeva combines strong typed-decision performance with near-perfect null detection and no decision flips under any tested permutations. It scales to thousands of candidates and substantially reduces latency through cross-request reuse without changing decisions.

한국어 요약

한 줄 요약

Jeva는 시스템 원 결정 문제의 구조적 요구사항을 충족하는 새로운 결정 네이티브 아키텍처이다.

핵심 기여도

핵심 아이디어

Jeva는 기존 시스템 원 모델이 텍스트 시퀀스를 통해 결정을 내리는 방식의 한계를 극복하기 위해, 결정 문제의 구조적 특성을 반영한 새로운 아키텍처를 제안한다. 기존 모델은 후보와 요청을 결합하여 인코딩하므로, 후보 재조합이나 순열 변경 시 계산을 다시 수행해야 한다. Jeva는 요청과 각 후보를 독립적으로 인코딩한 뒤, 불변의 후보 메모리에 접근하는 방식으로, 요청에 독립적인 후보 표현을 유지한다. 결정 스택은 요청 상태만을 정제하며, 대칭 집계와 공유 점수를 통해 순열 불변 확률과 가변 크기 후보 집합을 처리한다. 커버리지 게이트는 null 확률을 별도로 추정하여, 후보 간 경쟁과 null 결정을 구분한다. 이러한 설계는 Choice, Noul, Score 결정을 통합적으로 처리할 수 있게 한다.

기술적 접근법

주요 결과

의의 및 한계

Jeva는 시스템 원 결정 문제의 핵심 구조를 반영한 첫 번째 결정 네이티브 아키텍처로, null 감지, 순열 불변, 가변 크기 후보 처리, 캐시 재사용을 동시에 달성한다. 이는 대규모 후보 집합 처리와 지연 최적화에 실질적인 기여를 한다. 그러나 Jeva는 특정 백본(Qwen3.5-4B)에 의존하며, 다른 백본으로의 이식 가능성은 명시되지 않음. 또한, 커버리지 게이트의 학습 안정성이나 복잡한 결정 상황에서의 일반화 능력은 추가 실험을 통해 검증이 필요하다.

실용적 활용

Jeva는 도구 선택, 문서 검색, 조건 판단, 점수 부여 등 다양한 시스템 원 결정 작업에 적용 가능하다. 특히, 대규모 후보 집합을 다루는 웹 검색, 추천 시스템, 자동화된 의사결정 시스템에서 지연 최적화와 정확도 향상에 기여할 수 있다.