Qiannao CMS ist das führende automatische Crawling-Programm in China.
Kann den Inhalt fast jeder Website crawlen;
Der Code ist verfeinert, die Erweiterung ist hochgradig anpassbar und sie ist kostenlos und Open Source!
Das Programm besteht aus Code, Regeln und Vorlagen als separate Komponenten!
Programm-Highlights:
Originaler PHP-Caching-Algorithmus, Crawling-Algorithmus, Filteralgorithmus und stabiler Betrieb!
Original heuristische, vollautomatische Update-Engine, generiert automatisch statische und automatische Updates!
Die intelligente Erkennungsfunktion für den Originalbildpfad unterstützt die Bildlokalisierung (und die automatische Wasserzeichenmarkierung)!
Ursprüngliche Unterverzeichnis-Speicherfunktion, Multi-Verzeichnis-Hash-Cache (ähnlich dem Multi-Table-Hash von SQL), Speicherung und Lesen können die Mikroebene erreichen!
Die ursprüngliche Funktion zur automatischen Hyperlink-Analyse identifiziert auf intelligente Weise alle Hyperlink-Formate der Zielseite.
Ob es sich um ein Unterverzeichnis oder ein Stammverzeichnis, einen relativen Pfad oder einen absoluten Pfad handelt, eine 100 % intelligente Erkennung erfordert keinen Ersatz! (Außer Second-Level-Domainnamen)
Dieses Programm erkennt ausgehende Links perfekt. Wenn die Zielseite Links zu anderen Websites enthält, kann der Hintergrund so eingestellt werden, dass ausgehende Links zugelassen werden.
Der Code wurde mehrfach optimiert und getestet. Er ist extrem schnell, läuft robust und hat die geringste Auslastung unter allen Sammlungs- und Crawling-Programmen!
Unterstützt zwei Diebstahlmethoden: Curl und file_get_contents. Virtuelle Hosts unterstützen erstere, gute Nachrichten für die Basis!
Das Programm enthält bereits eine Regel für Schönheitsbilder, die sehr mächtig ist!
Expandieren
