パドルNLP v2.8.1

PaddleNLP 2.0 は、テキスト フィールドにおける Paddle エコシステムのコア ライブラリであり、使いやすいテキスト フィールド API、マルチシナリオのアプリケーション例、および開発者の開発を向上させる高パフォーマンスの分散トレーニングという 3 つの主要な機能を備えています。テキスト フィールドの効率を高め、Flying Paddle 2.0 のコア フレームワークにおける NLP タスクのベスト プラクティスを提供します。

特徴

使いやすいテキストフィールドAPI

データの読み込み、テキストの前処理、モデル ネットワークの評価から推論の高速化までのドメイン API を提供します。豊富な中国語データ セットの読み込みをサポートするデータセット API。データの前処理を柔軟かつ効率的に実行する Transformer。などにより、NLP タスクのモデリングと反復の効率が大幅に向上します。

複数のシナリオの適用例

NLPの基礎技術、NLPのコア技術、NLPシステムの応用、関連する拡張応用など、学術レベルから産業レベルまでのNLP応用例を網羅。これは、Flying Paddle Core Framework 2.0 の新しい API システムに基づいて完全に開発されており、テキスト フィールドで Flying Paddle 2.0 フレームワークのベスト プラクティスを使用した開発を提供します。

高パフォーマンスの分散トレーニング

Flying Paddle コア フレームワークの最先端の自動混合精度最適化戦略に基づいて、分散型フリート API と組み合わせることで、4D ハイブリッド並列戦略をサポートし、非常に大規模なパラメーターのモデル トレーニングを効率的に完了できます。