Cracking de coleta de dados de sites anti-coleta (incluindo código-fonte) v2014.02.27

ilustrar

Este coletor é customizado para sites específicos que não podem ser coletados pela Locomotive. Caso precise coletar outros sites, será necessário modificar o código-fonte;

Eu escrevo regras de coleção, publico módulos, personalizo vários softwares e sou bom em quebrar várias anti-coleções;

O código-fonte foi escrito para o VS2008. Devido às minhas próprias limitações, não descarto erros no programa.

O programa não precisa definir parâmetros, basta clicar em “Iniciar Coleta”. A seguir está a tecnologia utilizada neste programa.

Multithreading usando ThreadPool.QueueUserWorkItem();

Use expressões regulares para corresponder às strings a serem coletadas;

Use POST para enviar dados e obter o código-fonte retornado;

Use WebClient DownloadFile para baixar imagens remotas para o local;

Use a classe de banco de dados de acesso para salvar os dados coletados no banco de dados.