AIの採点を高速・安く・正確に
Show HN: jevals – replacing LLM judges with typed Jev decisions
💬 In one line
作った本人が、AIを使った自動採点を簡単にする道具を持ってきました。
従来は遅くて高くて不安定だった判定を、新しい「判定AI」に切り替えることで、
100倍以上速く、値段も安く、結果もぶれなくなるそうです。
✨ What it does
-
採点が劇的に速い
従来は質問1つで数秒かかっていましたが、40個の質問を一度に出しても遅延が変わらず、平均200ミリ秒で返答します。
-
値段が安い
従来より大幅に安い料金設定で、採点にかかるコストを減らせるため、もっと多くのデータを検査できるようになります。
-
判定がぶれない
従来のAIは同じ内容を採点しても答えが変わることがありましたが、この方法は結果が安定しており、テストの基準として信頼できます。
🛠 Who it helps
AIが出した答えが正しいかどうかを自動で調べる仕事をしている人、機械学習モデルが本当に使えるのか試したい企業の開発チーム、ChatGPTなどが作った文章や判断を大量にチェックする必要がある人に役立ちます。
⚠️ Caution
まだ試作段階で、コミュント数も少なく、実装にはプログラミングの知識が必要です。
🔗 Original
The write-up above summarises the original. See it for the exact details.
The headline and summary are an AI's Japanese rendering of a page published by an individual or a small team. They can diverge from the original. For the exact wording, follow the link to the source. Terms of Use