findmytube

プロジェクトの要件

• NodeJS >= 14.13.1
• Python 3.X
• Docker と Docker-compose
• 糸
• 午後2時

要件をインストールしたら: ./dev/setup.sh

日常

./dev/startup.sh

すべてを開発モードで開始するには:

• エラスティックサーチ
• レディス
• キバナ
• コア
• www
• API
• プロデューサー
• ビデオワーカー
• チャネルワーカー
• クロンチャネルプロデューサー

初めて./dev/startup.shを実行すると、プロデューサーは./packages/producer/src/producer.tsの下にチャネルを伝播してデータベースにデータを追加します。

デフォルトでは、開発モードではvideo-worker 3 つのインスタンスを持つPm2で起動されます。他のすべてのサービスで開発ログをスパム送信することを回避します。

video-workerログを取得するには、 pm2 monit実行すると、各インスタンスを検査できるようになります。

どのように機能するのでしょうか？

各サービスは./packagesの下にあります。
それぞれに特定の役割があります。

ElasticSearch、Kibana、Redis、および Redis Commander はdocker-composeで実行されます。 ./docker/dev.yamlを参照してください。

プロデューサー

プロデューサーは、スクラップする新しいチャネルをChannel Redis Queueに送信します。

lerna run --scope @findmytube/producer dev --stream

チャネルワーカー

チャネル ワーカーはチャネル Redis キューからチャネルを取得し、チャネルのビデオを取得してVideo Redus キューに送信します。

lerna run --scope @findmytube/channel-worker dev --stream

ビデオワーカー

Video Worker はVideo Redis Queueからビデオを取得し、各ビデオの各トランスクリプトをスクラップして ElasticSearch に保存します。

lerna run --scope @findmytube/video-worker dev --stream

dev startに置き換えて、 video-workerの 1 つのインスタンスを作成し、 Pm2なしで端末からログを直接取得します。

クロンチャネルプロデューサー

これは、すでに保存されている各チャンネルの新しいビデオを他のサービスに強制的にスクラップさせるための (本番用の) cron ジョブです。

lerna run --scope @findmytube/cron-channel-producer dev --stream