mfqp

мфкп

Веб-сайт для поиска вопросников

Утилиты

Количество статей в json-файле

$ jq ' . | length ' data/data.json

Найдите количество статей, ссылка на которые не заканчивается на PDF и не находится на Диске.

$ jq ' .[].Link ' data/data.json | awk -F ' " ' ' { if (match($2, /pdf$/) == 0 && match($2, /drive.google.com/) == 0) { print $2 } } ' | wc

Посчитать количество дубликатов

 # Find the original number of papers
$ jq ' .[].Link ' data/data.json | wc
# Find the number of unique records
$ jq ' .[].Link ' data/data.json | sort | uniq | wc
# Subtract the result of the second command
# from the first to get the number of duplicates 

 # oneliner to find the number of duplicates
$ echo $(( `jq '.[].Link' data / data.json | sort | uniq - D | wc - l` - `jq '.[].Link' data / data.json | sort | uniq - d | wc - l` )) 

Получение всех бумажных ссылок с нового сайта библиотеки

Запустите следующее из папки data :

python3 ../scripts/pdfFinder.py data.json

Для этого вам необходимо установить BS4. Чтобы установить его, запустите:

pip3 install bs4 --user

Это обновит файл data.json ссылками в формате PDF, найденными на сайте библиотеки. Затем из корневого каталога репозитория запустите:

python3 remove_dups.py

Это позволит удалить все повторяющиеся записи.

Сайт библиотеки не работает? ( http://10.17.32.9 )

Выполните следующую команду, зафиксируйте новый файл data.json и отправьте его в этот репозиторий:

sed -ie " s/http://10.17.32.9/https://static.metakgp.org/g " data/data.json

или если вам нужно вернуться на сайт библиотеки:

sed -ie " s/https://static.metakgp.org/http://10.17.32.9/g " data/data.json

ЛИЦЕНЗИЯ

Лицензия GNU General Public License v3.0 (GPLv3).

Содействие

Пожалуйста, прочитайте руководство CONTRIBUTING.md, чтобы узнать больше.