Hamel Husain

问：我应该为我发现的每种故障模式构建自动评估器吗？ 答：不会。不同类型的评估员有不同的成本（代码与 LLM 法官），您需要在构建评估之前权衡。 https://hamel.dev/blog/posts/evals-faq/should-i-build-automated-evaluators-for-every-failure-mode-i-find.html