Blue Sky Collector は、php+mysql を使用して開発された無料のデータ収集および公開クローラー ソフトウェアで、ほぼすべての種類の Web ページを収集し、さまざまな CMS Web サイト構築プログラムとシームレスに接続できます。ログインせずにリアルタイムでデータを公開します。手動介入なしで自動的に公開されます。これは、Web ビッグデータ収集ソフトウェアにおける完全なクロスプラットフォームのクラウド クローラー システムです。
青空コレクターの特徴:
SkyCaiji は、PHP + Mysql を使用して開発された Web クローラー システムであり、クラウド サーバーおよび仮想ホストにデプロイでき、ブラウザーを使用してデータを収集できます。このソフトウェアは無料で無制限に使用でき、ルールやプラグインはカスタマイズできます。
データ収集:
マルチレベル、マルチページ、およびページング収集と、あらゆる情報フローに正確に一致するカスタム収集ルール (正規表現、XPATH、JSON などをサポート) をサポートし、ほぼすべての種類の Web ページとコンテンツを収集できます。ほとんどの記事タイプをインテリジェントに識別できます。
コンテンツリリース:
さまざまな CMS Web サイト構築プログラムにシームレスに接続し、ログインせずにデータをインポートします。また、データベースへの直接インポート、Excel ファイルとしての保存、リモート API 公開などもサポートしています。
クラウドの導入と自動化:
このソフトウェアは CMS プログラムに似ており、完全にクロスプラットフォームで、どのシステムにもインストールでき、仮想ホストでも適切に実行できます。時限・定量の全自動回収・放出を実現し、簡単な操作で連続回収を実現!