NLP Introduction

Itu? Kursus NLP

Repo ini berisi ringkasan kursus NLP Hugging Face .

Kursus ini mengajarkan Anda tentang penerapan Transformers ke berbagai tugas dalam pemrosesan bahasa alami dan seterusnya. Sepanjang prosesnya, Anda akan mempelajari cara menggunakan ekosistem Hugging Face — ? Transformer,? Kumpulan data, ? Tokenizer, dan ? Percepat — serta Hugging Face Hub.

Pytorch

Buku catatan dan catatan dalam repositori ini menggunakan PyTorch.

Untuk menginstal, jalankan perintah berikut:

pip3 install torch torchvision torchaudio

pip install transformers[torch]

Anda juga dapat menginstal file requirements.txt .

? Buku catatan Jupyter

Notebook Jupyter yang berisi semua kode dari kursus dihosting di repo huggingface/notebooks . Jika Anda ingin membuatnya secara lokal, instal dulu dependensi yang diperlukan:

python -m pip install -r requirements.txt

Kemudian jalankan skrip berikut:

python utils/generate_notebooks.py --output_dir nbs

Jika Anda menggunakan venv, ingatlah untuk menginstal kernel baru ke lab/notebook jupyter Anda:

python -m ipykernel install --user --name=nlp-course-venv

Skrip ini mengekstrak semua cuplikan kode dari bab dan menyimpannya sebagai buku catatan di folder nbs .

? Ucapan Terima Kasih

Struktur repo dan README ini terinspirasi oleh NLP Tingkat Lanjut yang luar biasa dengan kursus spaCy dan ? kursus NLP.