Python - Api Scrap sendo bloqueado pelo Cloudfare

  • Status do projeto

    Fechado

  • Interessado

    0

  • Postado em

  • Localização

    O projeto pode ser concluído remotamente

  • Orçamento

    R$ 100 - R$ 500

  • Depósito pago

    R$ 0,00

  • Bônus total por indicação

    R$ 10,00

  • Na contratação

    R$ 10,00

  • postado por

    Marcelo

  • Habilidades:

    Python Scraping scraper cloudflare Python Selenium webscraping data mining

Descrição do Projeto

Possuo um projeto onde utilizo uma chamada API do Medium para extrair algumas informações do retorno da api, porém atualmente só consigo rodar a api com uma pausa de 10 em 10 segundos. Caso eu utilize um delay abaixo de 10 segundos, após algum tempo a API é bloqueada com a proteção de CloudFare.
Meu objetivo é rodar essa api de 1 em 1 segundo, ja tentei utilizar proxies anonymous (adquiridos e não free) e não consegui evitar o block da cloudfare.
Mesmo com proxies, a Cloudfare conseguiu identificar o IP da máquina e bloqueia.
Procure algum programador que tenha conhecimento nesses blocks da Cloudfare e consiga fazer uma solução onde eu possa rodar essa API a cada 1 segundo, pode ser utilizando proxies, ou qualquer outra solução.
O objetivo desse trabalho é fazer uma solução que me permita rodar a api a cada 1 segundo sem delay maior que isso, e compartilhe comigo o código fonte da solução.

Quem tiver interesse E O CONHECIMENTO, me chame para gente iniciar a conversa.

Indique alguém e receba o pagamento!

Você conhece alguém que se encaixa bem no projeto? Ganhe comissão indicando freelancers! Por cada inscrição você ganha 5 € diretamente na sua conta e quando o freelancer é contratado pela plataforma você ganha 2% dos ganhos deste freelancer!

Preencha os detalhes do profissional que você gostaria de recomendar:

Quando o freelancer aceitar o convite, ele será automaticamente adicionado à sua rede e você ganhará 2% a mais todos os ganhos deste freelancer através da plataforma. Para mais informações consulte nosso Termos e Condições

Convite enviado!

after_invite_popup_message

Freelancers interessados

    {{ item.displayName }} {{ item.displayName }}

    {{ item.displayDisciplines }}

    • {{ item.hourlyRate || '-' }} por hora
    • {{ item.cityName }}
      {{ item.stateName }}, {{ item.countryName }}
    • {{ item.nrSharedConnections }} conexões compartilhadas
    Premium
    Abrir bate-papo

Nenhum freelancer interessado ainda

Recusar

    {{item.displayName}}

    {{item.displayDisciplines}}

    • {{ item.hourlyRate || '-' }} por hora
    • {{ item.cityName }}, {{ item.stateName }}
    • {{item.nrSharedConnections}} conexões compartilhadas
Cancelar
Operação falhou!
Por favor, tente novamente mais tarde. Se o problema persistir entre em contato com o suporte.