PRIME MEMBER EXCLUSIVE | 3 Months Free Trial

Auto-renews at INR 199/mo after 3 months. Cancel anytime. Offer ends 15 July, 2026.
#21 AI の評価が新しい計算ボトルネックになっている? cover art

#21 AI の評価が新しい計算ボトルネックになっている?

#21 AI の評価が新しい計算ボトルネックになっている?

Listen for free

View show details

Hugging Face / EvalEval Coalition のブログ "AI evals are becoming the new compute bottleneck" を読んで、AI評価のコスト問題について話しました。HAL、GAIA、τ-bench、PaperBench の実コスト、pass^k による信頼性測定、Every Eval Ever の取り組みなどを扱います。

adbl_web_anon_alc_button_suppression_t1
No reviews yet