AutoArena

AutoArena 是一个开源工具，旨在使用 LLM 评审者自动化评估生成式 AI 系统的对比。它允许用户快速、准确地生成比较不同 LLM、RAG 设置或提示变体的排行榜。用户可以根据具体需求微调自定义评审者。AutoArena 通过自动化的对抗评判，促进了对 LLM、RAG 系统和生成性 AI 应用的可信评估。