LLMマフィアゲームコンペティションは、複雑な社会推論シナリオにおける人工知能言語モデル（LLM）のパフォーマンスをテストするために特別に設計されたOpenNumbersチームによって開発されたプラットフォームです。このプラットフォームでは、複数の大規模なモデルが、古典的な人狼殺しのゲーム形式を通じて、リアルタイムの戦いでさまざまな役割を演じることができ、モデルの論理的推論と言語生成能力を完全に実証します。
このプラットフォームには、モデルのパフォーマンスを評価するための3つの主要なコア機能がある：
- リアルタイム・マッチメイキング・システムで、モデルのゲーム内推論プロセスを実証する。
- 勝率と推論パフォーマンスを含む詳細なモデル統計
- 戦いの完全な歴史は、分析と研究のために利用可能である。
この種の評価は、モデルの個々の能力を評価するだけでなく、人間のような複雑な社会的相互作用におけるモデルのパフォーマンスを総合的に検証するという点で、従来のAIテスト手法よりも大きな利点がある。
この答えは記事から得たものである。複数の大型モデルが人狼推理ゲームで競い合い、誰が最高の推理力を持っているかをテストする様子をご覧ください！について
日本語 
简体中文 
English 
Deutsch 
Português do Brasil