O PartCrafter representa um grande avanço na tecnologia de geração 3D como a primeira solução de código aberto que permite a transformação de ponta a ponta de uma única imagem RGB em um modelo de peça 3D editável. Essa inovação é baseada em uma tecnologia de geração 3D estruturada que permite a análise e a geração simultâneas de várias peças 3D semanticamente vinculadas por meio de um transformador de difusão de malha 3D (DiT) pré-treinado e uma arquitetura de espaço latente combinada. Em contraste com os métodos tradicionais de geração holística, o mecanismo de atenção hierárquica exclusivo do PartCrafter fortalece o modelo de duas maneiras: garante a consistência estrutural entre as peças (por exemplo, as quatro pernas de uma cadeira permanecem simétricas) e preserva os recursos detalhados de peças individuais (por exemplo, a morfologia curva de um assento). O projeto integrou um conjunto de dados de treinamento contendo 130.000 objetos 3D, com 100.000 amostras com anotações detalhadas em nível de peça que sustentam a capacidade do modelo de compreender estruturas complexas.
Essa resposta foi extraída do artigoPartCrafter: geração de modelos de peças 3D editáveis a partir de uma única imagemO




























