LMSYS Org，由加州大學伯克利分校、加州大學圣地亞哥分校和卡內基梅隆大學合作創立的研究組織。該機構推出 Chatbot Arena，是一個針對大型語言模型（LLM） 的基準平臺，以眾包方式匿名、隨機對抗測評大模型產品，其評級基于國際象棋等競技游戲中廣泛使用的 Elo 評分系統。評分結果通過用戶投票產生，系統每次會隨機選擇兩個不同的大模型機器人和用戶聊天，并讓用戶在匿名的情況下選擇哪款大模型產品的表現更好一些，整體而言相對公正，LMSYS-AI大模型競技場-排行榜官網入口網址