Descrição
Web Scraping 101 com Python3 usando REQUESTS, LXML & SPLASH
Web Scraping para Iniciantes com Python usando Requests, LXML e Splash
Web Scraping para iniciantes com Python usando Requests, o poderoso LXML e Splash para sites em JavaScript. O que é web scraping? Digamos que seu supervisor no trabalho tenha atribuído a você a tarefa de extrair cerca de 1000 produtos de um site, estruturar os dados e salvá-los em um banco de dados. Você copiaria e colaria manualmente todos os detalhes do produto, incluindo o nome, URL e preço? Levaria dias e noites para concluir a tarefa. É aí que o web scraping se destaca. O web scraping, também conhecido como web harvesting ou extração de dados da web, envolve escrever um script que automatiza a extração de dados de sites em apenas alguns minutos! Por que aprender Web Scraping? Seja você um analista de dados, um desenvolvedor web ou até mesmo alguém que procura trabalhar como freelancer, aprender web scraping é essencial. Para um analista de dados, construir um conjunto de dados é extremamente importante e, sem o web scraping, é quase impossível gerar um. Além disso, ter habilidades de web scraping em seu currículo é um diferencial. O web scraping pode ser usado em várias áreas. Aqui estão alguns exemplos do que você pode fazer com ele: gerar leads, drop shipping (extrair constantemente produtos de diferentes lojas online para exibir em seu site e ganhar dinheiro), monitorar preços de produtos em busca das melhores ofertas, automação, aprendizado de máquina e freelancing de web scraping. As possibilidades são infinitas! Este curso é adequado para você? Planejei e projetei cuidadosamente este curso para ser amigável para iniciantes. Com base em minha experiência, sei que a maioria dos praticantes de web scraping são analistas de dados sem conhecimento prévio de como a web funciona, como são feitas as solicitações, como localizar e analisar dados da web e muito mais. Este curso é o mais atualizado e abrange as ferramentas e frameworks de web scraping mais utilizados. Vamos configurar o ambiente de desenvolvimento do zero e abordar os fundamentos principais do LXML, seletores XPath e CSS, como a web funciona (Requisição/Resposta), raspagem de páginas web HTML simples, raspagem de várias páginas web, extração de dados de APIs, uso do Splash para raspagem de sites em JavaScript, autenticação/login, armazenamento de dados extraídos e dicas exclusivas para web scraping. Este curso é baseado em projetos, com cada seção focando em um site diferente. Cada projeto tem um certo grau de dificuldade e é completamente independente dos outros. Existem tarefas/exercícios incluídos neste curso? Sim, cada seção inclui uma tarefa para ajudá-lo a praticar e ganhar confiança em web scraping. Ao final de cada seção, após concluir a tarefa, você se sentirá mais confortável e confiante em suas habilidades de web scraping. Por que LXML e não BeautifulSoup? LXML é um analisador HTML leve e até mesmo o framework de web scraping mais popular, o Scrapy, é construído em cima do LXML. BeautifulSoup possui mais funções para usar, mas no web scraping, principalmente usamos seletores XPath e CSS para navegar e selecionar o que será extraído da página web HTML. Não há necessidade de aprender novas funções e perder tempo se familiarizando com a API e a arquitetura interna do BeautifulSoup. Além disso, o LXML tem um desempenho melhor do que o BeautifulSoup em termos de performance. Quem é seu instrutor? Olá! Sou Ahmed, prazer em conhecê-lo. Meus alunos preferem me chamar de "Ninja do web scraping". Já ensinei mais de 2000 alunos em todo o mundo a fazer web scraping. Eu mesmo me envolvo em web scraping diariamente, seja por diversão, projetos pessoais ou como freelancer. Eu até tenho um mestrado em ciência da computação. Devo me inscrever neste curso? Honestamente, se inscrever neste curso não tem risco. Se o curso não atender às suas expectativas, você pode solicitar um reembolso dentro de 30 dias após a inscrição, garantido pela Udemy, sem perguntas. Então, se você não sabe nada sobre web scraping e não sabe por onde começar, inscreva-se agora!O que você vai aprender
- Fundamentos principais do LXML - Seletores XPath e CSS - Como enviar solicitações HTTP com Python - Raspagem de páginas web HTML - Raspagem de várias páginas usando recursão - Raspagem de APIs - Splash HTTP API - Raspagem de sites em JavaScript usando o Splash - Autenticação e login em sites usando Requests - Melhores práticas de web scraping - Construção de conjuntos de dadosEstimar frete
Payment & Security
Featured collection
Dúvidas Gerais
Após a confirmação do pagamento, você receberá um e-mail com todas as instruções para acessar seus cursos. O e-mail incluirá um link para a plataforma de ensino, onde você poderá fazer login utilizando suas credenciais cadastradas no momento da compra. Caso seja um curso em formato de arquivo para download, o mesmo estará disponível na área do aluno e poderá ser acessado diretamente pelo link enviado. Se você não receber o e-mail de acesso em até 24 horas, verifique sua caixa de spam ou entre em contato com nossa equipe pelo e-mail suporte@amentil.com.br.
Após a confirmação do pagamento, seu pedido será processado e enviado para o endereço cadastrado. Você receberá um e-mail com os detalhes do envio, incluindo o código de rastreamento para acompanhar a entrega. Trabalhamos com transportadoras confiáveis e os prazos variam de acordo com o método de envio escolhido e sua localização. É importante garantir que o endereço de entrega esteja correto para evitar atrasos. Caso tenha dúvidas ou problemas com a entrega, nossa equipe de suporte está à disposição pelo e-mail suporte@amentil.com.br.
Você pode tirar dúvidas diretamente com nossa equipe de suporte por diversos canais:
- E-mail: Envie sua pergunta para suporte@amentil.com.br, e nossa equipe responderá em até 2 dias úteis.
- Telefone: Ligue para +55 (48) 1234-5678, disponível de segunda a sexta, das 9h às 18h.
- WhatsApp: Envie uma mensagem para +55 (48) 91265-4321 e receba atendimento rápido e prático.
- Formulário de Contato: Preencha o formulário disponível em nosso site na página Contato.
- Redes Sociais: Você também pode enviar suas dúvidas pelo Instagram ou Facebook em @amentil.sa.
Estamos sempre prontos para ajudar!
Reembolso e garantias
O prazo de reembolso pode variar dependendo da forma de pagamento utilizada:
- Cartão de Crédito: O estorno será realizado em até 7 dias úteis após a aprovação do reembolso, mas o crédito poderá aparecer na sua fatura em um prazo de 30 a 60 dias, conforme a política da operadora do cartão.
- Boleto Bancário ou Transferência: O valor será devolvido via depósito em conta bancária em até 7 dias úteis após a aprovação do reembolso.
Você pode solicitar a devolução de produtos físicos seguindo o passo a passo abaixo:
- Entre em contato com nosso suporte:
- Aguarde nossa resposta:
Nossa equipe analisará sua solicitação em até 3 dias úteis e fornecerá as instruções detalhadas para a devolução. - Prepare o produto:
- Envie o produto:
- Reembolso ou troca:
Nosso compromisso é fornecer uma experiência confiável e segura ao acessar nossa enciclopédia online. Garantimos a qualidade dos serviços e funcionalidades oferecidos, seguindo as condições descritas abaixo:
1. Garantia de Acesso
- Disponibilidade: Oferecemos garantia de disponibilidade da enciclopédia online 24 horas por dia, 7 dias por semana, exceto durante períodos programados de manutenção ou por problemas técnicos fora do nosso controle.
- Resolução de Problemas: Em caso de interrupções no serviço, nossa equipe técnica atuará para restaurar o acesso no menor tempo possível.
2. Garantia de Conteúdo
- Precisão e Atualização: Todo o conteúdo disponibilizado é cuidadosamente revisado para garantir precisão e relevância. No entanto, a enciclopédia online é constantemente atualizada, e não podemos garantir a exatidão absoluta em casos de informações sujeitas a mudanças rápidas.
- Correção de Erros: Caso identifique erros ou inconsistências no conteúdo, você pode nos informar pelo e-mail conteudo@amentil.com.br, e faremos a análise e correção, se necessário.
3. Garantia de Segurança
- Proteção de Dados: Utilizamos tecnologias avançadas para proteger suas informações pessoais e garantir que sua navegação na enciclopédia seja segura.
- Privacidade: Todos os dados coletados seguem as diretrizes da nossa Política de Privacidade.
4. Garantia de Reembolso
Para assinaturas da enciclopédia online:
- Direito de Arrependimento: Você pode solicitar o cancelamento e reembolso integral em até 7 dias corridos após a compra, desde que não tenha acessado conteúdos pagos da plataforma.
- Problemas Técnicos: Caso não consiga acessar os conteúdos devido a falhas técnicas imputáveis à plataforma, garantimos suporte prioritário e, se o problema não for resolvido, você pode solicitar reembolso proporcional ao período não utilizado.
5. Limitações
- Conexão à Internet: Não garantimos acesso à enciclopédia em situações de instabilidade ou falhas na conexão de internet do usuário.
- Uso Indevido: O acesso e uso da enciclopédia são pessoais e intransferíveis. O compartilhamento de credenciais pode resultar na suspensão ou cancelamento da assinatura sem reembolso.
6. Contato para Garantias
Caso precise de suporte ou queira exercer algum direito de garantia, entre em contato conosco:
- E-mail: suporte@amentil.com.br
- Telefone: +55 (48) 1234-5678
- Horário de atendimento: Segunda a sexta, das 9h às 18h.