Minicurso de Web Scraping usando Python + Scrapy
Esse foi um minicurso que desenvolvi para a matéria de empreendedorismo na faculdade.
Aqui, utilizaremos Python e o framework Scrapy para fazer crawling em paginas da internet e download de imagens nas mesmas. (Utilizaremos uma pagina de mangás como exemplo).
Porquê você deveria obter esse minicurso?
Ao final do curso, você terá o conhecimento necessário para fazer scraping de qualquer página estática na internet, perfeito para criação de bases de dados diversas, download de arquivos, assim como o de qualquer conteúdo disponibilizado.
O que esse minicurso cobre?
- Instalação do Python.
- Configuração do Ambiente Python.
- Instalação do Scrapy.
- Uso do Scrapy Shell.
- Introdução a inspeção de elementos na web.
- Introdução aos seletores CSS.
- Criação de Projetos no Scrapy.
- Follow de links com Scrapy.
- Download de imagens usando Scrapy.
- Customização da pipeline de imagens.
ATUALIZAÇÃO DEZEMBRO/22 - Novas aulas adicionadas que avançam o projeto com novas funcionalidades
- Integração de novas bibliotecas para fazer a conversão das imagens baixadas em PDFs.
- Automação na busca de novos capítulos.
- Rotina para fazer o script ser executado periodicamente.
Para quem é esse minicurso?
- Gosta de tutoriais que vão direto ao ponto.
- Quer aprender com projetos na prática.
- Quer começar a usar o Scrapy.
Se interessou e quer dar uma olhada melhor?
O vídeo de introdução onde apresento a ferramenta e faço os primeiros comandos está disponível gratuitamente no link abaixo:
Aula 1 - Introdução e Configuração do Ambiente
Comprou e não ficou satisfeito com o conteúdo? Não tem problema, você pode pedir reembolso em até 30 dias!
Contato:
Discord: YMatos#9798
Acesso ao mini-curso com 6 vídeo aulas criando um projeto com Scrapy do zero.