Extrayez et comptez les pays et les villes (+ leurs synonymes) à partir du texte, comme GeoText sous stéroïdes à l'aide de FlashText, une implémentation d'Aho-Corasick. Flashgeotext est une bibliothèque Python native, rapide, incluse (et BYOD) et qui extrait un ou plusieurs ensembles de noms de villes et de pays donnés (+ synonymes) à partir d'un texte d'entrée.
Article de blog d'introduction : https://iwpnd.github.io/articles/2020-02/flashgeotext-library
from flashgeotext . geotext import GeoText
geotext = GeoText ()
input_text = '''Shanghai. The Chinese Ministry of Finance in Shanghai said that China plans
to cut tariffs on $75 billion worth of goods that the country
imports from the US. Washington welcomes the decision.'''
geotext . extract ( input_text = input_text )
>> {
'cities' : {
'Shanghai' : {
'count' : 2 ,
'span_info' : [( 0 , 8 ), ( 45 , 53 )],
'found_as' : [ 'Shanghai' , 'Shanghai' ],
},
'Washington, D.C.' : {
'count' : 1 ,
'span_info' : [( 175 , 185 )],
'found_as' : [ 'Washington' ],
}
},
'countries' : {
'China' : {
'count' : 1 ,
'span_info' : [( 64 , 69 )],
'found_as' : [ 'China' ],
},
'United States' : {
'count' : 1 ,
'span_info' : [( 171 , 173 )],
'found_as' : [ 'US' ],
}
}
}
Ces instructions vous permettront d'obtenir une copie du projet opérationnel sur votre ordinateur local à des fins de développement et de test.
pépin:
pip install flashgeotext
conda :
conda install flashgeotext
pour le développement :
git clone https://github.com/iwpnd/flashgeotext.git
cd flashgeotext/
poetry install
poetry run pytest . -v
Voir aussi la liste des contributeurs ayant participé à ce projet.
Ce projet est sous licence MIT - voir le fichier LICENSE.md pour plus de détails
Villes de données de démonstration de http://www.geonames.org sous licence Creative Commons Attribution 3.0.