首頁>編程相關>其他源碼
下載

自然語言 YouTube 搜尋

使用 OpenAI 的 CLIP 神經網路在 YouTube 影片中進行搜尋。您可以透過在 Google Colab 上執行筆記本來嘗試。

新的

  • 與 Gradio 整合到 Huggingface Spaces。參見演示：

它是如何運作的

  1. 下載 YouTube 影片
  2. 提取每第 N 幀
  3. 使用 CLIP 對所有幀進行編碼
  4. 使用 CLIP 對自然語言搜尋查詢進行編碼
  5. 尋找與搜尋查詢最匹配的圖像

欲了解更多詳細信息，請參閱筆記本。

範例

以下是來自 YouTube 影片中的一些搜尋範例，該影片顯示一輛汽車在舊金山行駛。

“一輛消防車”

搜尋: "消防車" 的結果搜尋: "消防車" 的結果搜尋: "消防車" 的結果

《道路工程》

搜尋: "道路工程" 的結果搜尋: "道路工程" 的結果搜尋: "道路工程" 的結果

《過馬路的人們》

搜尋: "過馬路的人" 的結果搜尋: "過馬路的人" 的結果搜尋: "過馬路的人" 的結果

“內河碼頭”

搜尋: "內河碼頭" 的結果搜尋: "內河碼頭" 的結果搜尋: "內河碼頭" 的結果

“等紅燈”

搜尋: "等紅燈" 的結果搜尋: "等紅燈" 的結果搜尋: "等紅燈" 的結果

“綠色自行車道”

搜尋: "綠色自行車道" 的結果搜尋: "綠色自行車道" 的結果搜尋: "綠色自行車道" 的結果

“一條有電車軌道的街道”

搜尋: "有電車軌道的街道" 的結果搜尋: "有電車軌道的街道" 的結果搜尋: "有電車軌道的街道" 的結果

“泛美金字塔”

「泛美金字塔」的搜尋結果「泛美金字塔」的搜尋結果「泛美金字塔」的搜尋結果

Unsplah 上的自然語言搜索

您也可以嘗試我的另一個項目，使用自然語言查詢在 Unsplash 上搜尋 200 萬張照片：

自然語言圖像搜尋

展開
附加信息
相關應用
爲您推薦
相關資訊 全部