Preparação para a instalação
Antes de usar o OmniParser, você precisa configurar um ambiente Python adequado e instalar os componentes necessários.
passo a passo
- Criação de um ambiente virtual::
conda create -n "omni" python==3.12 conda activate omni
- Instalação de dependênciasInstalação de todas as dependências em requirements.txt via pip
- Obtenção de pesos de modelosDownload dos arquivos de modelo v2.0 do Hugging Face para o diretório especificado
advertência
1. ambiente Python 3.12 necessário
2. é necessário colocar o arquivo de pesos baixado na estrutura de diretórios correta
3. os arquivos de modelo para detecção de ícones e descrições de ícones precisam ser armazenados separadamente
Depois de concluir a configuração acima, você pode iniciar a interface de teste executando gradio_demo.py.
Essa resposta foi extraída do artigoOmniParser: capturas de tela da interface do usuário analisadas em elementos estruturados para facilitar a compreensão e a manipulação de modelos grandesO































