Back to explore

CLERC 검색 벤치마크에서 Jev 성능

CLERC 쿼리 하위 집합에서 파인튜닝 없는 Laya는 2.5%로 BM25(5%)와 FastLate(10%)보다 낮았고, Jev는 30%, Luna는 22.5%, 프롬프트 튜닝 시 Luna는 52.5–55%에 도달했습니다.

I ran it on a subset of CLERC queries (recovering a missing citation’s source). Laya, without fine-tuning, scored 2.5% top-1, below BM25 (5%) and FastLate (10%). Jev 30%, Luna 22.5% , with bit of prompt tuning Luna gets 52.5–55%,

CLERC 검색 벤치마크에서 Jev 성능 1
· 0 likesOpen on X