Jev活用のコツ:AIに文章を書かせない発想で問い合わせ対応が明確に
著者がJevの使用感を共有。最初は難しく感じたが、「AIに文章を書かせない」と捉えると一気に理解できた。問い合わせ対応を例に、従来はGPTやClaudeに丸投げして分析させるが、Jevは考え方が異なると述べている。
3,080件のサポートチケットでJevとClaude Opus 5を比較。Jevの低信頼度の回答のみをOpusに送ると、精度は84.0%で、Opus単独よりも3.5倍安価です。全件Opus、全件Jev、Jev優先で不確かな場合のみOpus、という3つのデプロイ戦略を議論しています。
Jev vs Claude Opus 5 on 3,080 support tickets. Send only Jev's low-confidence answers to Opus → 84.0% accuracy, still 3.5x cheaper than Opus alone. Which would you ship? 1. Opus for everything 2. Jev for everything 3. Jev first, Opus when unsure #LLM #AIEngineering