SearchEnginesBookmarklet

Поисковые системыБукмарклет

Сбор списков URL-адресов, заголовков, дат и описаний по запросу в поисковой системе, такой как Google, DuckDuckGo, Baidu, Bing или Qwant, является постоянной потребностью в цифровых методах, и ее трудно автоматизировать из-за ограничений этих веб-сайтов по отношению к роботам.

SearchEnginesBookmarklet — это низкотехнологичное решение этой проблемы, предлагающее простой способ сделать это прямо из браузера.

Установите его в несколько кликов со следующей страницы: https://medialab.github.io/SearchEnginesBookmarklet/

Он работает как небольшой значок, который можно перетащить на панель закладок вашего браузера, что позволяет вам:

• сначала переключитесь с обычной страницы результатов поиска на страницу, содержащую до 100 результатов на странице, если поисковые системы это позволяют;
• затем одним щелчком мыши загрузите результаты страницы в виде табличного файла CSV или сохраните их в памяти браузера и перейдите на следующую страницу результатов, чтобы загрузить больше результатов одновременно.

Установите локальную версию для разработки

 # Install node's express dependency
npm install express

# Create an HTTPS key & certificate set
openssl genrsa -out key.pem
openssl req -new -key key.pem -out csr.pem
openssl x509 -req -days 9999 -in csr.pem -signkey key.pem -out cert.pem
rm csr.pem

# Run your local HTTPS server
node serve-https.js

# Edit SearchEnginesBookmarklet.js to comment the second line and uncomment the third one

# Load the following page in your browser to accept the unsafe certificate first
https://localhost:4443/

# Then install your development version of the bookmarklet as usual by dragging and dropping the image from that page into your bookrmarks bar 

Кредиты и лицензия

Бенджамин Уге-Табану, Жюльен Понтуар и др. @ Sciences Po médialab

Узнайте больше о наших проектах на сайте médialab Tools.

SearchEnginesBookmarklet — бесплатное программное обеспечение с открытым исходным кодом, выпущенное под лицензией GPL 3.0.