mfqp
1.0.0
Sitio web para la búsqueda de cuestionarios
$ jq ' . | length ' data/data.json
$ jq ' .[].Link ' data/data.json | awk -F ' " ' ' { if (match($2, /pdf$/) == 0 && match($2, /drive.google.com/) == 0) { print $2 } } ' | wc
# Find the original number of papers
$ jq ' .[].Link ' data/data.json | wc
# Find the number of unique records
$ jq ' .[].Link ' data/data.json | sort | uniq | wc
# Subtract the result of the second command
# from the first to get the number of duplicates
# oneliner to find the number of duplicates
$ echo $(( `jq '.[].Link' data / data.json | sort | uniq - D | wc - l` - `jq '.[].Link' data / data.json | sort | uniq - d | wc - l` ))
Ejecute lo siguiente desde la carpeta data
:
python3 ../scripts/pdfFinder.py data.json
Necesitas instalar BS4 para eso. Para instalarlo ejecute:
pip3 install bs4 --user
Esto actualizará el archivo data.json
con los enlaces pdf que se encuentran en el sitio de la biblioteca. Luego, desde el directorio raíz del repositorio, ejecute:
python3 remove_dups.py
Esto eliminará todas las entradas duplicadas.
Ejecute el siguiente comando, confirme el nuevo archivo data.json y envíelo a este repositorio:
sed -ie " s/http://10.17.32.9/https://static.metakgp.org/g " data/data.json
o si necesita volver al sitio de la biblioteca:
sed -ie " s/https://static.metakgp.org/http://10.17.32.9/g " data/data.json
Licenciado bajo la Licencia Pública General GNU v3.0 (GPLv3).
Lea la guía CONTRIBUTING.md para saber más.