PaddleNLP v2.8.1
2.8.1
PaddleNLP 2.0是飛槳生態的文本領域核心庫,具備易用的文本領域API,多場景的應用示例、和高性能分佈式訓練三大特點,旨在提升開發者文本領域的開發效率,並提供基於飛槳2.0核心框架的NLP任務最佳實務。
易用的文字領域API
提供從資料載入、文字預處理、模型組網評估、到推理加速的領域API:支援豐富中文資料集載入的Dataset API;靈活高效地完成資料預處理的Data API;提供60+預訓練模型的Transformer API等,可大幅提升NLP任務建模與迭代的效率。
多場景的應用範例
涵蓋從學術到工業級的NLP應用範例,涵蓋從NLP基礎技術、NLP核心技術、NLP系統應用以及相關拓展應用。全面基於飛槳核心框架2.0全新API體系開發,為開發提供飛槳2.0框架在文本領域的最佳實務。
高性能分散式訓練
基於飛槳核心框架領先的自動混合精度最佳化策略,結合分散式Fleet API,支援4D混合平行策略,可有效率地完成超大規模參數的模型訓練。