tensorflow ml nlp tf2

Silakan merujuk ke tautan di bawah untuk buku pertama tentang pemrosesan bahasa alami yang dimulai dengan TensorFlow dan pembelajaran mesin.

Tautan buku pertama: https://github.com/NLP-kr/tensorflow-ml-nlp

* Pemberitahuan: Model GPT2 tidak lagi didukung oleh Dropbox. Untuk mendownload modelnya, silakan ikuti langkah-langkah di bawah ini.

 wget https://github.com/NLP-kr/tensorflow-ml-nlp-tf2/releases/download/v1.0/gpt_ckpt.zip -O gpt_ckpt.zip

BUKU NLP

Pemrosesan bahasa alami dimulai dengan TensorFlow 2 dan pembelajaran mesin (dari regresi logistik hingga BERT dan GPT3)

Perkenalan

Ini adalah gudang contoh pemrosesan bahasa alami yang disertakan dalam buku ini.

Repositori ini akan lebih berguna jika Anda menggunakannya bersama dengan buku pemrosesan bahasa alami yang dimulai dengan TensorFlow dan pembelajaran mesin.

Metode instalasi (Lingkungan)

Panduan Docker telah ditambahkan untuk mendukung berbagai lingkungan pengembangan untuk contoh pemrosesan bahasa alami.

Kami merekomendasikan penggunaan Docker untuk merespons perubahan dalam pembaruan paket lab untuk contoh di masa mendatang.

Jalankan Jupyter Docker (disarankan)

Saat menggunakan lingkungan Docker, kami menyarankan penggunaan versi 19.03 atau lebih baru.

• Menjalankan bash build_jupyter_for_cpu.sh atau bash build_jupyter_for_gpu.sh akan membuat image buruh pelabuhan.
• Saat Anda menjalankan bash exec_jupyter_for_cpu.sh atau bash exec_jupyter_for_gpu.sh jupyter berjalan di lingkungan Docker.
• Nomor port eksekusi jupyter adalah 8889, sehingga nomor port tersebut harus tersedia.

Instalasi Anakonda

Jika Anda tidak dapat menemukan file instalasi Anaconda, temukan dan unduh versi berikutnya dari tautan berikut.

 https://repo.anaconda.com/archive
# windows 권장 버전: Anaconda3-5.3.0-Windows-x86_64.exe
# linux 권장 버전: Anaconda3-5.3.0-Linux-x86_64.sh
# MacOS 권장 버전: Anaconda3-5.3.0-MacOSX-x86_64.pkg
# 해당 버전을 받지 않아도 환경 구성을 하는데 큰 문제는 없습니다.

• Konfigurasi lingkungan virtual Anaconda Python

 conda create -n {사용할 환경 이름} python=3.6
conda activate {사용할 환경 이름} # 경우에 따라 동작이 안될 수 있습니다. 아래의 명령어를 입력해보세요.
# source activate {사용할 환경 이름} 
pip install -r requirements.txt

Jika instalasi tidak berjalan dengan benar, silakan instal python 3.6 dan lanjutkan.

 conda install python=3.6

Daftar isi

Tahap persiapan - Bab ini memberikan latar belakang tentang pemrosesan bahasa alami dan persiapan untuk pengembangan.

1. Masuk
2. Mempersiapkan pengembangan pemrosesan bahasa alami
3. Ikhtisar Pemrosesan Bahasa Alami

Dasar-dasar Pemrosesan Bahasa Alami - Ini adalah bab praktik tentang model dasar dalam pemrosesan bahasa alami.

4. Klasifikasi teks
5. Kesamaan Teks

Pemrosesan Bahasa Alami Tingkat Lanjut - Ini adalah bab praktik tentang pemrosesan bahasa alami tingkat lanjut melalui model chatbot.

6. Buat bot obrolan
7. Menyempurnakan pembelajaran
8. GPT3

Latihan kolaborasi

Repositori terpisah telah dirilis untuk latihan Colab hanya untuk Bab 7 dan 8.

• tautan repositori

Pertanyaan

Permintaan tarik selalu diterima. Jika Anda memiliki masalah, bug, atau pertanyaan, silakan tinggalkan pesan di masalah tersebut.

**Sebelum memeriksa masalah ini, harap lihat dokumen di Wiki terlebih dahulu dan berikan komentar mengenai masalah tersebut!

Penulis

ChangWookJun / @changwookjun ([email protected])
Taekyoon / @taekyoon ([email protected])
JungHyun Cho / @JungHyunCho ([email protected])
Ryan S.Shin / @aiscientist ([email protected])