PaddleNLP v2.8.1

PaddleNLP 2.0 é a biblioteca central do ecossistema Paddle no campo de texto. Possui três recursos principais: API de campo de texto fácil de usar, exemplos de aplicativos em vários cenários e treinamento distribuído de alto desempenho. eficiência no campo de texto e fornecer as melhores práticas para tarefas de PNL na estrutura central do Flying Paddle 2.0.

Características

API de campo de texto fácil de usar

Fornece APIs de domínio desde carregamento de dados, pré-processamento de texto, avaliação de rede de modelo até aceleração de inferência: API de conjunto de dados que suporta o carregamento de conjuntos de dados chineses ricos que completa o pré-processamento de dados de maneira flexível e eficiente; etc., pode melhorar muito a eficiência da modelagem e iteração de tarefas de PNL.

Exemplos de aplicação para vários cenários

Cobrindo exemplos de aplicação de PNL do nível acadêmico ao industrial, abrangendo tecnologia básica de PNL, tecnologia central de PNL, aplicação de sistema de PNL e aplicações expandidas relacionadas. É totalmente desenvolvido com base no novo sistema API do Flying Paddle Core Framework 2.0, proporcionando desenvolvimento com as melhores práticas do framework Flying Paddle 2.0 no campo de texto.

Treinamento distribuído de alto desempenho

Com base na estratégia líder de otimização automática de precisão mista da estrutura principal do Flying Paddle, combinada com a API Fleet distribuída, ele suporta uma estratégia paralela híbrida 4D e pode concluir com eficiência o treinamento de modelos de parâmetros de grande escala.