PHP Science TextRank

テキストランク

このソース コードは、MIT ライセンスに基づいて PHP プログラミング言語で TextRank アルゴリズムを実装したものです。

TextRank と ChatGPT の比較

ChatGPT のような GPT は、コンテキストを理解し、膨大なリソースを使用して指定された入力から新しいコンテンツを生成する教師あり言語モデルですが、TextRank はコスト効率の高い/低コストのテキスト抽出アルゴリズムです。 TextRank アルゴリズムは、テキスト サイズを削減してリソース消費を節約する GPT モデルのプリプロセッサとしても使用できます。

TextRank または自動要約

自動要約は、元の文書の最も重要な点を保持した要約を作成するために、コンピューター プログラムを使用してテキスト文書を縮小するプロセスです。一貫した要約を作成できるテクノロジーでは、長さ、書き方、構文などの変数が考慮されます。自動データ要約は、機械学習とデータ マイニングの一部です。要約の主な考え方は、セット全体の情報を含む、データの代表的なサブセットを見つけることです。要約テクノロジーは、今日の産業界の多くの分野で使用されています。 - ウィキペディア

この実装のアルゴリズムは次のとおりです。

• 文章を抽出し、
• ストップワードを削除し、
• 一致する単語を見つけて数えることにより、単語に整数値を追加します。
• 単語の価値を重み付けし、
• 値を正規化してスコアを取得します。
• スコア順に並べ替える

プロジェクトで使用するにはインストールしてください

 cd your-project-folder
composer require php-science/textrank

貢献するためにインストールする

 cd git-project-folder
docker-compose build
docker-compose up -d
composer install
composer test

例

 use PhpScience  TextRank  Tool  StopWords  English ;

// String contains a long text, see the /res/sample1.txt file.
$ text = " Lorem ipsum... " ;

$ api = new TextRankFacade ();
// English implementation for stopwords/junk words:
$ stopWords = new English ();
$ api -> setStopWords ( $ stopWords );

// Array of the most important keywords:
$ result = $ api -> getOnlyKeyWords ( $ text ); 

// Array of the sentences from the most important part of the text:
$ result = $ api -> getHighlights ( $ text ); 

// Array of the most important sentences from the text:
$ result = $ api -> summarizeTextBasic ( $ text );

その他の例:

• テスト/TextRankFacadeTest.php
• https://php.science

著者、寄稿者

名前	GitHub ユーザー
デビッド・ベリツァ	@DavidBelicza
リカルド・マートン	@リカルドマートン
シンデシ	@シンデシ
ヴィンセントシュ	@vincentsch
アンドリュー・ウェルチ	@カルワット
アンドレイ・アスタショフ	@mvcaaa
レオ・トネフ	@ブラグル
ウィリー・アリスキー	@willyarisky
ロバート・ヤン・カイザー	@KeizerDev
モーティ	@evil1morty
セゼル・フィダンジュ	@SezerFidanci