A principal competência do EduChat se reflete em três dimensões:
- Otimização verticalEm comparação com os modelos de uso geral, como o ChatGPT, seus dados de treinamento contêm 2 milhões de dados de diálogos educacionais chineses e 2 milhões de dados de ensino de inglês, e superam a precisão média de 85% dos modelos de uso geral em termos de precisão do conhecimento do assunto (os cenários educacionais medidos chegam a 92%).
- Inovações nos modelos de ensinoO exclusivo mecanismo de diálogo socrático, em comparação com o Carnegie Learning e outros sistemas de tutoria inteligente, enfatiza mais a orientação do pensamento do que a transmissão de conhecimento, e a qualidade do questionamento foi avaliada por especialistas em pedagogia como estando no nível do 87% de um professor.
- Código aberto personalizávelDiferentemente das soluções comerciais de código fechado (por exemplo, o AI Tutor do Duolingo), os pesos completos do modelo e a cadeia de ferramentas CleanTool são fornecidos e suportados:
- Limpeza de dados (eliminação de duplicação, filtragem de qualidade)
- Ajuste fino da adaptação do domínio (suporte para adicionar conteúdo curricular baseado na escola)
- Adaptação de hardware (a versão 1.8B é executada em GPUs de consumo)
De acordo com a avaliação comparativa da equipe do ICALK, o EduChat-13B supera o LLaMA-2 com o mesmo tamanho de parâmetro em 19 pontos percentuais em termos de qualidade de resposta em perguntas do tipo TIMSS (Escala Internacional de Matemática e Ciências), com uma taxa de erro 271 TP3T menor.
Essa resposta foi extraída do artigoEduChat: um modelo de diálogo educacional de código abertoO





























