Extraia e conte países e cidades (+seus sinônimos) de texto, como GeoText em esteróides usando FlashText, uma implementação Aho-Corasick. Flashgeotext é uma biblioteca python nativa, rápida, com baterias incluídas (e BYOD) que extrai um ou mais conjuntos de nomes de cidades e países (+ sinônimos) de um texto de entrada.
postagem introdutória do blog : https://iwpnd.github.io/articles/2020-02/flashgeotext-library
from flashgeotext . geotext import GeoText
geotext = GeoText ()
input_text = '''Shanghai. The Chinese Ministry of Finance in Shanghai said that China plans
to cut tariffs on $75 billion worth of goods that the country
imports from the US. Washington welcomes the decision.'''
geotext . extract ( input_text = input_text )
>> {
'cities' : {
'Shanghai' : {
'count' : 2 ,
'span_info' : [( 0 , 8 ), ( 45 , 53 )],
'found_as' : [ 'Shanghai' , 'Shanghai' ],
},
'Washington, D.C.' : {
'count' : 1 ,
'span_info' : [( 175 , 185 )],
'found_as' : [ 'Washington' ],
}
},
'countries' : {
'China' : {
'count' : 1 ,
'span_info' : [( 64 , 69 )],
'found_as' : [ 'China' ],
},
'United States' : {
'count' : 1 ,
'span_info' : [( 171 , 173 )],
'found_as' : [ 'US' ],
}
}
}
Estas instruções fornecerão uma cópia do projeto em funcionamento em sua máquina local para fins de desenvolvimento e teste.
pip:
pip install flashgeotext
Conda:
conda install flashgeotext
para o desenvolvimento:
git clone https://github.com/iwpnd/flashgeotext.git
cd flashgeotext/
poetry install
poetry run pytest . -v
Veja também a lista de colaboradores que participaram deste projeto.
Este projeto está licenciado sob a licença MIT - consulte o arquivo LICENSE.md para obter detalhes
Cidades de dados de demonstração de http://www.geonames.org licenciadas sob a licença Creative Commons Attribution 3.0.