video crawler

видео-краулер

Сканирование веб-сайтов в поисках видео с Youtube, Vimeo, Soundcloud и т. д.

Я использую это для получения видео для https://www.findlectures.com и статей для персонализированных информационных бюллетеней (https://www.findlectures.com/form?type=alert).

Предпосылки:

• YouTube-DL
• Node.js
• завиток
• ffmpeg

Если этих команд нет в пути, вы можете указать их расположение:

FFMPEG=d:/Software/ffmpeg-20160619-5f5a97d-win32-static/bin/ffmpeg.exe

ЮТУБ_DL=

УЗЕЛ=

КУРЛ=

ФФМПЕГ=

Если вы хотите получать по электронной почте zip-файлы с докладами и стенограммами, создайте учетную запись Postmark и установите следующие параметры:

POSTMARK_API_KEY=

POSTMARK_BCC=

POSTMARK_REPLY_TO=

Примеры:

Я запускаю их через Intellij

TalkToMarkdown

аргументы: https://www.youtube.com/watch?v=YME2eyde38A&feature=youtu.be

необходимые переменные среды: FFMPEG, YOUTUBE_DL

Используйте это, если хотите конвертировать видео Youtube в формат уценки/поста в блоге.

MetadataCrawler "test.js"

Используйте это, если вы сканируете сайт.