assemblyline service urldownloader
v4.5.0.stable17
MAS の Kangooroo ユーティリティを使用して一見悪意のある URL をダウンロードするアセンブリライン サービス
Kubernetes では、no_sandbox オプションを構成する必要がない場合があります。 docker-compose セットアップで URLDownloader を実行していて、常にエラー (TimeoutExpired) で終了するという問題がある場合は、「no_sandbox」サービス変数をデフォルトの False から True に変更できます。このオプションは Google Chrome プロセスに渡され、問題が解決される可能性があります。
サービス変数は、「管理」タブの「サービス」項目にあります。サービス管理の詳細については、ドキュメントを参照してください。特にサービス変数については、こちらを参照してください。
URLDownloader サービスは、多くのプロキシを使用する (または使用しない) ように構成でき、送信ユーザーが選択肢から選択できるようにすることができます。プロキシを強制したい場合は、選択肢のリストに 1 つのエントリを含めることもでき、それが必須になります。複数のプロキシがあり、さまざまな場所からコンテンツをフェッチしたい場合があるため、URLDownloader はシステム構成に依存しません。また、取得したいプロキシが、システムの他の部分で使用されているプロキシとは異なる場合もあります。
URLDownloader サービスを構成するには、サービスのリストに移動し、[URLDownloader] をクリックします (または、 /admin/services/URLDownloaderに直接移動します)。 PARAMETERSという名前のタブが見つかるはずです。 2 つのパラメータが重要です。1 つ目はproxies [json] 、2 つ目はproxy [list]です。 proxies [json]から始めると、それらの関係を理解しやすくなります。これは、ページの下部にあるサービス変数の下にあります。
次のパターンに基づいて新しいエントリを作成できます。
Web インターフェイスで JSON を編集するには、JSON にカーソルを合わせると、上部に青いプラス記号が表示されます。
これにより、新しいキーを作成できるようになります。新しいキーにカーソルを置くと、編集できるようになります。
次に、 {}と入力して、[新しい辞書] ボタン (次のスクリーンショットの右下) をクリックします。
これで、http と https の 2 つの新しいキーを追加できるようになります。
ヒント: すべてのスキーム (http/https) に同じプロキシを使用する場合は、単純な文字列を使用できます。
サービス プロキシを構成した後、上部の [User Specified Parameters] の下にproxy [list]があるはずです。
追加したキーの名前 (この例ではmy_new_proxy ) を追加して、ユーザーが選択できるようにします。スターの付いたエントリは、ユーザーが設定しない場合のデフォルトの選択になります。ここから他のすべてのエントリを削除して、単一のエントリを強制できます。
