Is Jev as Accurate as Frontier Models at Classification?
Artikelbild eller återanvändbart omslag för OpenRouter
Claude Opus 5 leads OpenRouter's classification task ranking by spend.
We sent the same 3,080 Banking77 utterances to it and to Jev 1.13 through the Decisions API. Opus scored 84.4% to Jev's 81.0%, and Jev answered in 175 ms at $0.11 per thousand requests against 2.3 seconds and $2.42 for Opus.
Texten är källans egen beskrivning av publiceringen. Innehållet tillhör OpenRouter.
Mer att läsa
Build an AI Code Reviewer with OpenRouter
OpenRouter för 5 tim sedan
One word for AI agents in 2027
Nate Herk för 4 tim sedan
Tests: chatbots rely on three obscure AI-built voter sites for US midterm answers; Copilot cited the error-prone Ballot Brief in 75% of tests and ChatGPT in 22%
Techmeme för 5 tim sedan
AI:AM: Carbon in the Arena, Mistral's Le Chonk, the Agent-Run Economy, Ferroelectric RAM + New Hacks
The Cognitive Revolution för 7 tim sedan