Crackage de la collecte de données de sites Web anti-collecte (y compris le code source) v2014.02.27

illustrer

Ce collecteur est personnalisé pour des sites Web spécifiques qui ne peuvent pas être collectés par Locomotive. Si vous devez collecter d'autres sites Web, vous devez modifier le code source ;

J'écris des règles de collecte, je publie des modules, je personnalise divers logiciels et je suis doué pour déchiffrer divers anti-collections ;

Le code source est écrit pour VS2008. En raison de mes propres limitations, je n'exclus pas les bogues dans le programme. Le code source est uniquement à titre de référence.

Le programme n'a pas besoin de définir de paramètres, cliquez simplement sur "Démarrer la collecte". Voici la technologie utilisée dans ce programme.

Multithreading à l'aide de ThreadPool.QueueUserWorkItem();

Utilisez des expressions régulières pour faire correspondre les chaînes à collecter ;

Utilisez POST pour soumettre des données et obtenir le code source renvoyé ;

Utilisez WebClient DownloadFile pour télécharger des images distantes vers le local ;

Utilisez la classe de base de données Access pour enregistrer les données collectées dans la base de données.