Guia de instalação rápida em três etapas
O Web Crawler foi projetado com um processo de implementação minimalista:
- Preparação ambientalPython: requer o Python 3.12+ e o gerenciador de pacotes uv pré-instalado (3x mais rápido que o pip)
- Obter código-fonte: Implementação
git clone https://github.com/financial-datasets/web-crawler.git - procedimento de acionamentoVá para o diretório do projeto e execute
uv run web-crawlerEsse comando lida automaticamente com a instalação de dependências
Soluções típicas de problemas::
- Em caso de conflitos de versão do Python, recomendamos o uso do pyenv para gerenciar várias versões.
- Recomenda-se aos usuários do Windows que o executem no PowerShell para obter melhor compatibilidade
- A primeira execução pode demorar um pouco mais (cerca de 2 minutos), principalmente para configurar o ambiente virtual
Essa resposta foi extraída do artigoWeb Crawler: uma ferramenta de linha de comando para pesquisa em tempo real de informações da InternetO































