객관식 33문항을 문항당 1회 평가했습니다. OpenRouter Decisions → Cloudflare의 답 선택 결과이며, 풀이 생성·Python 실행·TAR 평가는 아닙니다. 주관식 13문항은 제외했습니다.
Problem Statement
함수 이고, 상수 a에 대하여 함수 를 이라 하자. 함수 가 오직 하나의 극값을 갖도록 하는 a의 최댓값을 k라 하자. a=k일 때, 의 값은?
① ② ③ ④ ⑤
Ground Truth
4
Recorded decision · No generated solution
| Choice | Probability | Decision |
|---|---|---|
| 1 | 13.9% | — |
| 2 | 22.5% | — |
| 3 | 28.2% | Selected |
| 4 | 23.7% | — |
| 5 | 11.7% | — |
Provider confidence: 0.02 · 공급자 반환값이며 정답을 보장하지 않습니다. 풀이·Python 실행은 없습니다.
Final Model Output
3
Comparative Analysis (Pcommon_15) (Average across runs)
Averages use reported measurements only. Missing usage is not treated as zero.
Avg Time Taken
Solar Decide
11.9
Cloudflare Clef
0.7
Kev 4B
0.6
Liquid D1
0.4
Mercury Decide (free)
0.3
Jev 1.13
0.3
Perplexity Decider V1 27B
0.3
Tev1 4B Experimental
0.3
Avg Token Usage
Jev 1.13
648
Solar Decide
574
Cloudflare Clef
428
Tev1 4B Experimental
389
Kev 4B
374
Perplexity Decider V1 27B
364
Mercury Decide (free)
305
Liquid D1
265