Análise da tecnologia de processamento de conhecimento MaxKB
O MaxKB cria um pipeline de processamento de documentos de ponta a ponta que contém mais de 20 adaptadores de documentos para análise de PDF, rastreamento da Web e reconhecimento de formulários. O fluxo de processamento é dividido em cinco estágios: documento original → extração de texto → chunking semântico → vetorização → indexação de conhecimento. O sistema usa o algoritmo de fragmentação adaptável para ajustar dinamicamente o tamanho da fragmentação de acordo com o tipo de documento, e a patente de tecnologia mostra que a taxa de recuperação é 18% maior do que o método tradicional de fragmentação fixa.
Há suporte para várias opções de modelos de incorporação na sessão de vetorização, incluindo o modelo text-embedding-3-large da OpenAI e o modelo bge-m3 de código aberto. O índice de conhecimento adota a arquitetura de armazenamento híbrido, mantém o índice invertido e o índice vetorial e oferece suporte à resposta de milissegundos a consultas compostas. Após a aplicação dessa tecnologia a uma plataforma de conhecimento jurídico, a precisão da recuperação da associação dos termos do contrato atinge 92,7%.
O sistema introduz, de forma inovadora, um mecanismo de aprendizado ativo para otimizar automaticamente os parâmetros de processamento por meio de feedback manual. A ferramenta de visualização do gráfico de conhecimento oferece suporte à visualização da rede de relacionamento de entidades e ajuda os usuários a descobrir associações de conhecimento ocultas, um recurso que demonstrou valor especial no campo de P&D farmacêutico.
Essa resposta foi extraída do artigoMaxKB: sistema de perguntas e respostas com base de conhecimento de IA pronto para uso para atendimento inteligente ao cliente e base de conhecimento internaO
