tensorflow ml nlp tf2

Consulte o link abaixo para obter o primeiro livro sobre processamento de linguagem natural, começando com TensorFlow e aprendizado de máquina.

Link do primeiro livro: https://github.com/NLP-kr/tensorflow-ml-nlp

* Aviso: o modelo GPT2 não é mais compatível com o Dropbox. Para baixar o modelo, siga as etapas abaixo.

 wget https://github.com/NLP-kr/tensorflow-ml-nlp-tf2/releases/download/v1.0/gpt_ckpt.zip -O gpt_ckpt.zip

LIVRO PNL

Processamento de linguagem natural começando com TensorFlow 2 e aprendizado de máquina (de regressão logística a BERT e GPT3)

Introdução

Este é um repositório de exemplos de processamento de linguagem natural incluídos no livro.

Este repositório será mais útil se você usá-lo em conjunto com um livro sobre processamento de linguagem natural que começa com TensorFlow e aprendizado de máquina.

Método de instalação (ambientes)

Um guia Docker foi adicionado para oferecer suporte a vários ambientes de desenvolvimento para o exemplo de processamento de linguagem natural.

Recomendamos usar o Docker para responder às alterações nas atualizações dos pacotes de laboratório para exemplos futuros.

Execute o Jupyter Docker (recomendado)

Ao usar um ambiente Docker, recomendamos usar a versão 19.03 ou posterior.

• Executar bash build_jupyter_for_cpu.sh ou bash build_jupyter_for_gpu.sh cria uma imagem docker.
• Quando você executa bash exec_jupyter_for_cpu.sh ou bash exec_jupyter_for_gpu.sh o jupyter é executado no ambiente Docker.
• O número da porta de execução do Jupyter é 8889, portanto, esse número da porta deve estar disponível.

Instalação Anaconda

Se você não conseguir encontrar o arquivo de instalação do Anaconda, encontre e baixe a próxima versão no link a seguir.

 https://repo.anaconda.com/archive
# windows 권장 버전: Anaconda3-5.3.0-Windows-x86_64.exe
# linux 권장 버전: Anaconda3-5.3.0-Linux-x86_64.sh
# MacOS 권장 버전: Anaconda3-5.3.0-MacOSX-x86_64.pkg
# 해당 버전을 받지 않아도 환경 구성을 하는데 큰 문제는 없습니다.

• Configuração do ambiente virtual Anaconda Python

 conda create -n {사용할 환경 이름} python=3.6
conda activate {사용할 환경 이름} # 경우에 따라 동작이 안될 수 있습니다. 아래의 명령어를 입력해보세요.
# source activate {사용할 환경 이름} 
pip install -r requirements.txt

Se a instalação não prosseguir corretamente, instale o python 3.6 e prossiga.

 conda install python=3.6

Índice

Estágio preparatório - Este capítulo fornece informações básicas sobre o processamento de linguagem natural e a preparação para o desenvolvimento.

1. Entrando
2. Preparando-se para o desenvolvimento do processamento de linguagem natural
3. Visão geral do processamento de linguagem natural

Noções básicas de processamento de linguagem natural - Este é um capítulo prático sobre modelos básicos de processamento de linguagem natural.

4. Classificação de texto
5. Similaridade de texto

Processamento avançado de linguagem natural - Este é um capítulo prático sobre processamento de linguagem natural mais avançado por meio de modelos de chatbot.

6. Crie um chatbot
7. Aprimorar o aprendizado
8. GPT3

Prática de colaboração

Um repositório separado foi lançado para a prática do Colab apenas para os Capítulos 7 e 8.

• link do repositório

Consultas

Solicitações pull são sempre bem-vindas. Se você tiver algum problema, bug ou dúvida, deixe uma mensagem na edição.

**Antes de verificar o problema, consulte primeiro o documento na Wiki e deixe um comentário sobre o assunto!

Autores

ChangWookJun / @changwookjun ([email protected])
Taekyoon / @taekyoon ([email protected])
JungHyun Cho / @JungHyunCho ([email protected])
Ryan S. Shin / @aiscientist ([email protected])