Weibo_Hot_Search

Weibo_Hot_Search

Es heißt, dass Menschen im Internet nur sieben Sekunden Gedächtnis haben, aber ich möchte diese sieben Sekunden Gedächtnis aufzeichnen.

Das Projekt wurde auf dem Server bereitgestellt. Es crawlt täglich um 11 und 23 Uhr die Hot Search-Liste, speichert sie im Markdown-Dateiformat und lädt sie dann auf GitHub hoch .

Fragen Sie mich nicht, warum ich die beiden Zeitpunkte 11 gewählt habe, denn ich habe immer das Gefühl, dass um diese beiden Zeitpunkte herum große Ereignisse stattfinden werden.

Egal, was die heißen Suchanfragen auf Weibo zu Familienangelegenheiten, nationalen Angelegenheiten, Weltangelegenheiten oder Unterhaltungsklatsch drehen, ich möchte es einfach getreu aufzeichnen ...

Betriebsumgebung

Python 3.0+

 pip install requests

pip install lxml

pip install bs4

oder ausführen

 pip install -r requirements.txt

Für Installation und Betrieb erforderliche Umgebung

laufen

• Bitte stellen Sie sicher, dass Sie die erforderliche Betriebsumgebung vorbereitet haben
• Methode ausführen (eine auswählen)
  1. Führen Sie weibo_Hot_Search_bs4.py (neu) oder weibo_Hot_Search.py ​​​​im Warehouse-Verzeichnis aus
  2. Führen Sie python weibo_Hot_Search_bs4.py (neu) oder python weibo_Hot_Search.py ​​​​in cmd aus
• Automatisch ausführen: Verwenden Sie dazu den Windows-Taskplaner

Dateien generieren

Nach der Ausführung wird im aktuellen Ordner ein mit der Zeit benannter Ordner wie folgt generiert:

 2019年11月08日

(Aktualisiert) und eine Markdown-Datei mit dem Namen einer bestimmten Zeit in bestimmten Stunden wird wie folgt generiert:

 2019年11月08日15点.md

(Weiter aktualisieren) und eine CSV-Datei mit dem Namen einer bestimmten Zeit in bestimmten Stunden wird wie folgt generiert:

 2020年08月27日00点.csv

Schnittstellenquelle

Es wird der Link zur öffentlichen Hot Search-Liste auf Sina Weibo verwendet: https://s.weibo.com/top/summary/

Stellungnahme

Alle Datenquellen für dieses Projekt stammen von Sina Weibo. Der Dateninhalt und seine Interpretationsrechte liegen bei Sina Weibo.

Informationen aktualisieren

31. Juli

1. bs4-Methode hinzugefügt
   • Neue Datei weibo_Hot_Search_bs4.py hinzugefügt
2. Optimieren Sie das Datenspeicherformat
   • Die Daten der bs4-Methode werden im Verzeichnis ./bs4版数据/ gespeichert. Das Speicherdatenformat ist序号-标题-热度（或置顶） . Dieses Format ist einfach zu verarbeiten und erleichtert die anschließende Datenvisualisierung und andere Analysen.
3. Beachten
   • Die Datendateien werden alle im .md-Format gespeichert. Es wird empfohlen, sie mit Notepad oder einer ähnlichen Software zu öffnen.

5. August

1. Die bs4-Version wurde in das CSV-Speicherformat geändert, was für die spätere Datenanalyse besser geeignet ist.
2. Die neuen .csv Dateien werden im bs4[.csv]版数据gespeichert.

9. August

1. Erklärung hinzugefügt: bs4[txt]版数据und lxml版数据wurden gestoppt. Alle neuen Daten werden in bs4[.csv] -Versionsdatendateien gespeichert.

Lizenz

GNU General Public License v3.0