Autor: ProxyScrape

Como construir um proxy HTTP em Python

Uma pessoa comum pode ter um conceito vago da função de um servidor proxy. A maioria das pessoas associa os servidores proxy à obtenção de privacidade ou ao desbloqueio de conteúdos Netflix de outros países. Mas a realidade é bem diferente, pois os servidores proxy fazem muito mais e são vitais para as empresas. Pode pensar-se nos servidores proxy como intermediários

Continuar a ler

Automatize a sua vida através de Web Scraping

Todos sabem que conhecimento é poder. É necessário efetuar algumas tarefas de recolha de dados para ter acesso às melhores informações. Um dos melhores métodos é o web scraping ou a extração de dados da Web para compilar e armazenar informações de sítios Web na Internet. Mas porque é que é necessário utilizar a raspagem da Web

Continuar a ler

O que é uma Firewall Proxy e como funciona

As firewalls de proxy podem ser consideradas sistemas de segurança de rede que filtram mensagens na camada de aplicação. São também chamadas firewalls de gateway ou de aplicação que limitam as aplicações que uma rede pode suportar. Embora aumentem os níveis de segurança, afectam a velocidade e a funcionalidade. A firewall tradicional não pode inspecionar o tráfego do protocolo de aplicação nem desencriptar o tráfego.

Continuar a ler

Web Scraping, Expressões Regulares e Visualização de Dados, Fazendo Tudo em Python

O Web scraping pode ser definido como o método de recolha e reestruturação de dados de sítios Web. Também pode ser definido como a abordagem programática da obtenção de dados de sítios Web de forma automatizada. Por exemplo, pretende extrair os IDs de correio eletrónico de todas as pessoas que comentaram uma publicação no Facebook. Pode fazê-lo através de

Continuar a ler

Raspagem da Web: O que fazer e o que não fazer

A raspagem da Web ou extração de dados da Web é um processo automatizado de recolha de dados de um sítio Web. As empresas utilizam a extração de dados da Web para se beneficiarem, tomando decisões mais inteligentes a partir da vasta quantidade de dados disponíveis publicamente. Podem extrair dados de forma organizada para que seja mais fácil analisá-los. A raspagem da Web tem muitas

Continuar a ler

Gestão de proxy para Web Scraping

Para ter uma ideia do que é um proxy, é necessário compreender o que é um endereço IP. É um endereço único associado a cada dispositivo que se liga à rede de Protocolo Internet, como a Internet. Por exemplo, 123.123.123.123 é um exemplo de um endereço IP. Os números podem variar de 0 a 255

Continuar a ler

Problemas relacionados com Proxies

Os servidores proxy são importantes por duas razões principais. A primeira é que proporcionam privacidade ao utilizador, que pode trabalhar online anonimamente com os seus dados protegidos. A segunda razão é que tornam a velocidade de navegação mais rápida através do armazenamento em cache. Assim, pode utilizá-los para acelerar a navegação devido à sua capacidade de armazenamento em cache.

Continuar a ler

Como usar um proxy em Python

É frequente encontrarmos o termo "proxy" quando trabalhamos no domínio da informática. Quando ligado à Internet, cada computador recebe um endereço IP (Internet Protocol) único que identifica o computador e a sua localização geográfica. O seu computador envia um pedido sempre que necessita de qualquer informação da Internet. O pedido é

Continuar a ler

Como fazer scraping do Reddit usando Python

As pessoas podem facilmente recolher e extrair informações de várias fontes, como o Facebook, o Reddit e o Twitter. Pode pensar-se num raspador como uma ferramenta especializada que extrai dados de uma página Web com precisão e rapidez. As APIs de raspagem ajudam os raspadores a evitar serem banidos por técnicas anti-raspagem que os sítios Web colocam. No entanto, é

Continuar a ler

Como fazer scraping de páginas de rolagem infinita usando Python

No mundo atual, todos utilizam as novas tecnologias. Pode obter acesso aos dados estruturados de forma automatizada com a ajuda da recolha de dados da Web. Por exemplo, pode utilizar a raspagem da Web para: O scrolling infinito, também conhecido como scrolling sem fim, é uma técnica de web design que os sítios Web utilizam frequentemente com AJAX ou Javascript

Continuar a ler