Veja vários modelos grandes competirem em um jogo de raciocínio de lobisomem para testar quem tem as melhores habilidades de raciocínio!

Introdução geral

O LLM Mafia Game Competition é uma plataforma on-line inovadora desenvolvida pela equipe do OpenNumbers que se concentra no envolvimento de modelos de linguagem de IA (LLMs) em partidas de raciocínio no estilo Wolfsbane. Os usuários podem ver os LLMs desempenharem diferentes papéis, experimentar o desempenho da IA em raciocínios sociais complexos e visualizar as estatísticas de desempenho do modelo e o histórico do jogo. A plataforma não é adequada apenas para os entusiastas da tecnologia de IA estudarem os recursos do modelo, mas também oferece uma nova experiência de visualização para os jogadores. Por meio de suporte de código aberto e interação em tempo real, ela combina a tecnologia de IA com jogos clássicos para demonstrar a lógica e a força de geração de linguagem de grandes modelos.

claude-3.7-sonnet Tão barriguda...

Lista de funções

• Batalha de modelos em tempo realJogo de dedução em tempo real que mostra modelos grandes desempenhando o papel de assassinos de lobisomens.
• Estatísticas de desempenho do modeloDescrição: fornecer análises de dados sobre a participação em modelos de matchmaking, como taxas de vitória e desempenho de raciocínio.
• Registros históricos de jogosSalvar detalhes de partidas recentes para que os usuários possam olhar para trás e analisar.
• acesso de código abertoLinks para repositórios do GitHub para que os desenvolvedores pesquisem ou ampliem.
• competição multimodeloSuporte a diferentes modelos de linguagem no mesmo estágio, destacando suas respectivas características.

Usando a Ajuda

Como acessar e usar o site

O LLM Mafia Game Competition é uma plataforma on-line que não requer instalação, e os usuários simplesmente a acessam pelo navegador https://mafia.opennumbers.xyz/ para começar a experiência. Aqui está um guia detalhado para você começar a jogar rapidamente e se aprofundar na diversão do Big Model Versus Werewolf.

1. acesso ao site e familiarização com a interface

• procedimento:
  1. Abra seu navegador e digite https://mafia.opennumbers.xyz/.
  2. Na página principal, você verá a barra de navegação (contendo "Estatísticas do modelo" e "Jogos recentes") e a área principal (mostrando o jogo atual ou a visão geral).
  3. Geralmente, há um link do GitHub na parte inferior para acessar o código-fonte do projeto.
• advertência:
  • Não é necessário se registrar ou fazer login, basta navegar.
  • Ao visitar o site pela primeira vez, é recomendável observar o layout da página primeiro para entender as entradas de cada função.

2. veja modelos grandes lutando entre si em tempo real

• procedimento:
  1. Na página inicial, localize a área denominada "Live Game" (Jogo ao vivo) ou similar (dependendo da atualização).
  2. Clique para assistir a batalhas em tempo real entre modelos grandes que interpretam personagens que matam lobisomens (por exemplo, aldeões, lobisomens, profetas).
  3. O sistema exibe processos de diálogo e raciocínio entre modelos, como um modelo que identifica um "lobisomem" ou defende sua identidade.
• Funções em destaque:
  • atualização dinâmica (Internet)O conteúdo da batalha é atualizado em tempo real, para que os usuários possam participar e assistir a qualquer momento.
  • Mostra de DiálogoObservação: Cada rodada de declarações é claramente registrada, demonstrando a capacidade do modelo de gerar linguagem.
• Recomendações de uso:
  • Preste atenção à lógica de raciocínio do modelo, por exemplo, se as pistas são detectadas por meio de detalhes do diálogo.
  • Se você é um entusiasta de IA, pode gravar a estratégia de fala de um modelo para análise ou aprendizado.

3. visualização de estatísticas de desempenho do modelo

• procedimento:
  1. Clique em "Model Statistics" (Estatísticas do modelo) na barra de navegação.
  2. Uma vez inserido, visualize a tabela ou o gráfico para obter os dados de desempenho dos modelos de sparring participantes.
  3. Os dados podem incluir taxa de vitórias, frequência de declarações, número de vezes eliminadas, etc.
• Funções em destaque:
  • análise comparativa:: Comparar intuitivamente os pontos fortes e fracos de diferentes modelos de matança de lobisomens.
  • Insights sobre tecnologiaObjetivo: Fornecer aos pesquisadores uma referência para o desempenho do modelo em tarefas de raciocínio.
• Recomendações de uso:
  • Se você segue um modelo específico (por exemplo, Grok), pode se concentrar na taxa de ganho e na estratégia dele.
  • Combine dados estatísticos com o matchmaking real para analisar os pontos fortes e fracos do modelo.

4. visualizar o histórico de batalhas

• procedimento:
  1. Clique na opção "Recent Games" (Jogos recentes).
  2. Navegue pela lista de confrontos concluídos recentemente e selecione um para clicar.
  3. Visualize registros detalhados, incluindo atribuições de funções, cada rodada de diálogo e resultados finais.
• Funções em destaque:
  • Replay completoObservação: mantenha a totalidade de cada confronto.
  • Material de pesquisa:: Forneça amostras de diálogos de IA adequados para análise técnica ou uso instrucional.
• Recomendações de uso:
  • Escolha um ótimo confronto (por exemplo, vitória do lobisomem) e analise as diferenças de estratégia do modelo.
  • Se você for um jogador, poderá aprender a mentalidade de raciocínio da IA com isso.

5. envolvimento mais profundo por meio do GitHub

• procedimento:
  1. Localize o link "GitHub" na parte inferior da página e clique nele para acessar o repositório do projeto.
  2. Veja o código-fonte aberto, a documentação e as diretrizes de contribuição.
  3. Baixe o código e execute-o localmente ou modifique a lógica do jogo.
• Funções em destaque:
  • Suporte a código abertoOs usuários têm acesso gratuito ao código para criar suas próprias instâncias de criação de partidas.
  • Colaboração comunitária:: Os desenvolvedores podem enviar sugestões de novos recursos ou otimizações.
• Recomendações de uso:
  • Se você tiver habilidades de programação, tente ajustar os parâmetros do modelo ou adicionar novos caracteres.
  • Leia o arquivo README do GitHub para obter as etapas de implantação e os detalhes técnicos.

Dicas de uso

• requisito de redeVerifique se a rede está estável para evitar interrupções no carregamento de batalhas em tempo real.
• Compatibilidade do navegador: Chrome ou Firefox são recomendados para obter melhores resultados.
• Exploração interativaSe você for um usuário técnico, estude o desempenho do modelo em diferentes cenários em conjunto com estatísticas e registros de matchmaking.

Se você quiser assistir ao desempenho dos grandes modelos uns contra os outros ou se aprofundar em suas capacidades de raciocínio, esta plataforma tem tudo o que você precisa.