질문 설계가 모델보다 중요: Jev vs Laya 테스트
동일한 430건 테스트에서 증거를 보여줬을 때 Jev는 68~92%, Laya는 84~88%의 허위 에이전트 보고를 통과시켰습니다. 직접적인 질문을 사용하자 Jev는 약 1%만 통과시켰습니다. 질문 설계가 모델보다 중요합니다. Link
THE JEV GUIDE · CURATED EDITION
TypeSafe Jev의 출시 소식, 설명, 데모, 커뮤니티 프로젝트를 주제별로 정리했습니다. 모든 항목은 X 원본 게시물로 연결됩니다.
선별 큐레이션 · 전체 수집 아님 · 수동 업데이트
Sponsors
이 제품들이 이 디렉터리를 후원합니다. 내 제품도 올리기
동일한 430건 테스트에서 증거를 보여줬을 때 Jev는 68~92%, Laya는 84~88%의 허위 에이전트 보고를 통과시켰습니다. 직접적인 질문을 사용하자 Jev는 약 1%만 통과시켰습니다. 질문 설계가 모델보다 중요합니다. Link
Sebastian Raschka가 텍스트 분류 기술의 발전 과정을 다루고 TypeSafe AI의 의사결정 모델 Jev를 소개하는 필독 기사. Link
본 논문은 증오 발언 검열에서 Jev와 같은 구조화된 의사 결정 모델의 정확성과 효율성을 조사하여 콘텐츠 검열에 대한 통찰을 제공합니다. Link
사용자는 Jev-as-Judge가 심각성 및 관대함 편향을 가지며, 고위험 AI 평가에 유용하려면 이를 제거해야 한다고 지적합니다.
Jev 스타일 모델을 프로세스 보상 학습(PRL)의 판정자로 사용한 사례를 묻고, 더 나은 판정자가 PRL 부활로 이어질 수 있으며 더 많은 감독이 학습에 도움이 된다고 언급합니다.
One card in the feed, every sixteen, on every page of it. $50 a week, cancel any week.
James Briggs가 TypeSafe AI의 Jev 모델을 분석하고 OpenJev(Von) 및 소형 GLiNER 모델과 비교합니다. 단 74M 파라미터의 GLiNER가 Doom에서 놀라운 성능을 보이며 Jev를 이겼습니다.
Jev를 과학적 관점에서 살펴보며 빠른 AI와 지능이 어떻게 공존할 수 있는지 논의합니다. 전체 에피소드 링크 포함. Link
이 게시물은 arXiv 논문 "Labels Override Definitions in Jev-Style Typed Decision Models" (저자: Seyedarmin Azizi, Erfan Baghaei Potraghloo, Massoud Pedram)을 공유합니다. Link
사용자가 다양한 작업에서 Jev 및 유사 모델의 평가 결과와 지표 개요를 공유합니다.
연구자들은 오픈웨이트 Laya와 호스티드 Jev라는 두 System-1 의사결정 모델을 7,283개 기본 사례와 6,640개 강건성 변형을 사용해 11개 에이전트 의사결정 포인트에서 평가했으며, Jev가 더 나은 결과를 보였다.
이 연구는 Jev 모델을 Semantic SQL에 통합하여 LLM 등으로 문장 의미를 판단하고 SQL 필터링 및 JOIN 조건에 활용함으로써, 행별 판단에 따른 시간과 비용 증가 문제를 해결하고자 합니다.
TypeSafe의 System One 모델을 중국어 작업으로 확장하는 Chinese-Jev에 관한 논문을 소개하며, 자연어 처리와 컴퓨터 비전 등을 다룹니다. Link
Star the project on GitHub to support continued updates and curation.