Home Coleta de Dados & Automação, Python

Coleta de Dados & Automação Robôs que navegam, leem PDFs e buscam informações na web: requests, Selenium, XPath e companhia — sempre com ética.

6Articles

requests: como o Python visita sites (e o que significam 200, 404 e 500)

7 de novembro de 2022• Category: Coleta de Dados & Automação • Python

Com a biblioteca requests o Python acessa páginas da web como um navegador. Entenda os códigos de status HTTP e as regras de educação para não...

Extraindo texto de PDF com Python (pdfminer.six e pypdf)

2 de abril de 2020• Category: Coleta de Dados & Automação • Python

Transforme PDFs em texto que o computador consegue analisar, com duas bibliotecas de Python. E entenda por que PDF escaneado precisa de OCR....

Seu primeiro robô navegador: pesquisando na web com Selenium e Python

3 de dezembro de 2019• Category: Coleta de Dados & Automação • Python

Crie um robô que abre o navegador, digita uma pesquisa e espera o resultado carregar, usando Selenium com Python — e aprenda por que "esperar" é a parte...

XPath: o GPS para achar qualquer coisa numa página web

31 de março de 2018• Category: Coleta de Dados & Automação • Python

Aprenda a "endereçar" qualquer elemento de uma página com XPath, teste no console do navegador e use em Python com lxml para coletar dados....

Selenium sem dor de cabeça: o fim do download manual de drivers

6 de janeiro de 2018• Category: Coleta de Dados & Automação • Python

Em 2018 era preciso baixar o geckodriver na mão para o Selenium controlar o Firefox. Hoje o Selenium Manager faz isso sozinho. Veja como usar e como rodar o...

Lendo links e imagens de uma página HTML com PHP

7 de janeiro de 2015• Category: Coleta de Dados & Automação • PHP

Use o DOMDocument do PHP para abrir um arquivo HTML e listar todos os links e imagens — o primeiro passo de qualquer coleta de dados na web....

↑

Rafaelrjp Blog