Python Web Scraper for Auction Data
Budget: $30 – $250 USD
Preciso de um script Python para coletar dados de leiloeiros do site https://innlei.org.br/leiloeiros-do-brasil.
O scraper deve:
- Navegar na lista de leiloeiros.
- Acessar cada leiloeiro para coletar dados de leilões.
Os dados devem ser armazenados no Google Sheets ou em um banco de dados PostgreSQL com o formato .csv. As informações a serem coletadas incluem:
- Foto
- Nome do leiloeiro
- URL do leilão
- Datas
- Conteúdo
- Descrição
- Anexos
- Status da URL (ativa/encontrada)
O script deve ser capaz de atualizar os dados diariamente e verificar se as URLs ainda estão ativas. Habilidades ideais incluem:
- Proficiência em Python
- Experiência com web scraping (preferencialmente com Beautiful Soup ou Scrapy)
- Familiaridade com Google Sheets API e PostgreSQL
- Habilidade em manipulação e formatação de arquivos .csv
O scraper deve:
- Navegar na lista de leiloeiros.
- Acessar cada leiloeiro para coletar dados de leilões.
Os dados devem ser armazenados no Google Sheets ou em um banco de dados PostgreSQL com o formato .csv. As informações a serem coletadas incluem:
- Foto
- Nome do leiloeiro
- URL do leilão
- Datas
- Conteúdo
- Descrição
- Anexos
- Status da URL (ativa/encontrada)
O script deve ser capaz de atualizar os dados diariamente e verificar se as URLs ainda estão ativas. Habilidades ideais incluem:
- Proficiência em Python
- Experiência com web scraping (preferencialmente com Beautiful Soup ou Scrapy)
- Familiaridade com Google Sheets API e PostgreSQL
- Habilidade em manipulação e formatação de arquivos .csv
Related categories:
Python
Web Scraping
Django
Software Architecture
PostgreSQL
Scrapy
Data Extraction
Google Sheets
Automation
Data Collection