Jev, 분류기 평가에서 품질과 속도 모두 우세
Malte Ubl이 TypeSafe AI의 Jev를 기존 분류기 평가에 적용한 결과, 품질에서 평가를 포화시켰고 Gemini 2.5 Flash Lite보다 6배 빨랐다.
Arena.ai 데이터에 따르면 Jev는 효율성을 우선시하여 전체 모델 호출의 4분의 1 이상(28.1%)을 DeepSeek V4.1 Flash로 라우팅했으며, Anthropic의 LLM보다 OpenAI 모델(GPT-6 Astra 등)을 선호했습니다.
Jev prioritised efficiency and routed most calls to DeepSeek V4.1 Flash - over a quarter (28.1%) of all model calls. It showed preference for OpenAI models over Anthropic’s LLMs. GPT-6 Astra was the second most popular model (23.5%), followed by other GPT models, Sol (22.8%) and