nlpcloud python herunterladen - nlpcloud python Quellcode herunterladen

Python-Client für NLP Cloud

Dies ist der Python-Client für die NLP Cloud API. Weitere Einzelheiten finden Sie in der Dokumentation.

NLP Cloud bietet vorab trainierte oder benutzerdefinierte Hochleistungsmodelle für NER, Stimmungsanalyse, Klassifizierung, Zusammenfassung, Dialogzusammenfassung, Paraphrasierung, Absichtsklassifizierung, Produktbeschreibung und Anzeigengenerierung, Chatbot, Grammatik- und Rechtschreibkorrektur, Extraktion von Schlüsselwörtern und Schlüsselphrasen sowie Textgenerierung , Bildgenerierung, Quellcodegenerierung, Fragebeantwortung, automatische Spracherkennung, maschinelle Übersetzung, Spracherkennung, semantische Suche, semantische Ähnlichkeit, Tokenisierung, POS-Tagging, Einbettungen, und Abhängigkeitsanalyse. Es ist produktionsbereit und wird über eine REST-API bereitgestellt.

Sie können entweder die vorab trainierten NLP Cloud-Modelle verwenden, Ihre eigenen Modelle optimieren oder Ihre eigenen Modelle bereitstellen.

Wenn Sie auf ein Problem stoßen, zögern Sie nicht, es als Github-Problem anzusprechen. Danke!

Installation

Per Pip installieren.

pip install nlpcloud

Beispiele

Hier ist ein vollständiges Beispiel, das einen Text unter Verwendung des Bart Large CNN-Modells von Facebook mit einem gefälschten Token zusammenfasst:

 import nlpcloud

client = nlpcloud . Client ( "bart-large-cnn" , "4eC39HqLyjWDarjtT1zdp7dc" )
client . summarization ( """One month after the United States began what has become a 
  troubled rollout of a national COVID vaccination campaign, the effort is finally 
  gathering real steam. Close to a million doses -- over 951,000, to be more exact -- 
  made their way into the arms of Americans in the past 24 hours, the U.S. Centers 
  for Disease Control and Prevention reported Wednesday. That s the largest number 
  of shots given in one day since the rollout began and a big jump from the 
  previous day, when just under 340,000 doses were given, CBS News reported. 
  That number is likely to jump quickly after the federal government on Tuesday 
  gave states the OK to vaccinate anyone over 65 and said it would release all 
  the doses of vaccine it has available for distribution. Meanwhile, a number 
  of states have now opened mass vaccination sites in an effort to get larger 
  numbers of people inoculated, CBS News reported.""" )

Hier ist ein vollständiges Beispiel, das dasselbe tut, jedoch auf einer GPU:

 import nlpcloud

client = nlpcloud . Client ( "bart-large-cnn" , "4eC39HqLyjWDarjtT1zdp7dc" , True )
client . summarization ( """One month after the United States began what has become a 
  troubled rollout of a national COVID vaccination campaign, the effort is finally 
  gathering real steam. Close to a million doses -- over 951,000, to be more exact -- 
  made their way into the arms of Americans in the past 24 hours, the U.S. Centers 
  for Disease Control and Prevention reported Wednesday. That s the largest number 
  of shots given in one day since the rollout began and a big jump from the 
  previous day, when just under 340,000 doses were given, CBS News reported. 
  That number is likely to jump quickly after the federal government on Tuesday 
  gave states the OK to vaccinate anyone over 65 and said it would release all 
  the doses of vaccine it has available for distribution. Meanwhile, a number 
  of states have now opened mass vaccination sites in an effort to get larger 
  numbers of people inoculated, CBS News reported.""" )

Hier ist ein vollständiges Beispiel, das dasselbe tut, jedoch mit einem französischen Text:

 import nlpcloud

client = nlpcloud . Client ( "bart-large-cnn" , "4eC39HqLyjWDarjtT1zdp7dc" , True , "fra_Latn" )
client . summarization ( """Sur des images aériennes, prises la veille par un vol de surveillance 
  de la Nouvelle-Zélande, la côte d’une île est bordée d’arbres passés du vert 
  au gris sous l’effet des retombées volcaniques. On y voit aussi des immeubles
  endommagés côtoyer des bâtiments intacts. « D’après le peu d’informations
  dont nous disposons, l’échelle de la dévastation pourrait être immense, 
  spécialement pour les îles les plus isolées », avait déclaré plus tôt 
  Katie Greenwood, de la Fédération internationale des sociétés de la Croix-Rouge.
  Selon l’Organisation mondiale de la santé (OMS), une centaine de maisons ont
  été endommagées, dont cinquante ont été détruites sur l’île principale de
  Tonga, Tongatapu. La police locale, citée par les autorités néo-zélandaises,
  a également fait état de deux morts, dont une Britannique âgée de 50 ans,
  Angela Glover, emportée par le tsunami après avoir essayé de sauver les chiens
  de son refuge, selon sa famille.""" )

Ein JSON-Objekt wird zurückgegeben:

{
  "summary_text" : " Over 951,000 doses were given in the past 24 hours. That's the largest number of shots given in one day since the  rollout began. That number is likely to jump quickly after the federal government gave states the OK to vaccinate anyone over 65. A number of states have now opened mass vaccination sites. "
}

Verwendung

Client-Initialisierung

Übergeben Sie das Modell, das Sie verwenden möchten, und das NLP-Cloud-Token während der Initialisierung an den Client.

Das Modell kann entweder ein vorab trainiertes Modell wie en_core_web_lg , bart-large-mnli ... sein, aber auch eines Ihrer benutzerdefinierten Modelle unter Verwendung von custom_model/<model id> (z. B. custom_model/2568 ). Eine umfassende Liste aller verfügbaren Modelle finden Sie in der Dokumentation.

Ihr Token kann von Ihrem NLP Cloud-Dashboard abgerufen werden.

 import nlpcloud

client = nlpcloud . Client ( "<model>" , "<your token>" )

Wenn Sie eine GPU verwenden möchten, übergeben Sie gpu=True .

 import nlpcloud

client = nlpcloud . Client ( "<model>" , "<your token>" , gpu = True )

Wenn Sie das mehrsprachige Add-on nutzen möchten, um nicht-englische Texte zu verarbeiten, übergeben Sie lang="<your language code>" . Wenn Sie beispielsweise französischen Text verarbeiten möchten, sollten Sie lang="fra_Latn" einstellen.

 import nlpcloud

client = nlpcloud . Client ( "<model>" , "<your token>" , lang = "<your language code>" )

Wenn Sie asynchrone Anfragen stellen möchten, übergeben Sie asynchronous=True .

 import nlpcloud

client = nlpcloud . Client ( "<model>" , "<your token>" , asynchronous = True )

Wenn Sie asynchrone Anfragen stellen, erhalten Sie immer eine schnelle Antwort mit einer URL. Anschließend sollten Sie diese URL regelmäßig (z. B. alle 10 Sekunden) mit async_result() abfragen, um zu prüfen, ob das Ergebnis verfügbar ist. Hier ist ein Beispiel:

 client . async_result ( "https://api.nlpcloud.io/v1/get-async-result/21718218-42e8-4be9-a67f-b7e18e03b436" )

Der obige Befehl gibt ein JSON-Objekt zurück, wenn die Antwort bereit ist. Ansonsten wird None zurückgegeben.