NLP Introduction

？ NLPコース

このリポジトリには、 Hugging Face NLP コースの概要が含まれています。

このコースでは、自然言語処理やその他のさまざまなタスクに Transformers を適用する方法を学びます。その過程で、Hugging Face エコシステムの使用方法を学習します — ?トランスフォーマー、？データセット、?トークナイザー、そして ?ハグフェイスハブと同様に加速します。

ピトーチ

このリポジトリ内のノートブックとメモは PyTorch を使用します。

インストールするには、次のコマンドを実行します。

pip3 install torch torchvision torchaudio

pip install transformers[torch]

単にrequirements.txtファイルをインストールすることもできます。

?ジュピターノートブック

コースのすべてのコードを含む Jupyter ノートブックは、 huggingface/notebooksリポジトリでホストされています。これらをローカルで生成する場合は、まず必要な依存関係をインストールします。

python -m pip install -r requirements.txt

次に、次のスクリプトを実行します。

python utils/generate_notebooks.py --output_dir nbs

venv を使用する場合は、必ず新しいカーネルを jupyter ラボ/ノートブックにインストールしてください。

python -m ipykernel install --user --name=nlp-course-venv

このスクリプトは、各章からすべてのコード スニペットを抽出し、ノートブックとしてnbsフォルダーに保存します。

?謝辞

このリポジトリと README の構造は、spaCy コースと ? を備えた素晴らしい Advanced NLP からインスピレーションを得ています。 NLPコース。