Weibo_Hot_Search

웨이보_핫_검색

인터넷에 사람들의 기억력은 7초밖에 없다고 하는데 저는 이 7초의 기억력을 기록하고 싶습니다.

프로젝트는 서버에 배포되었으며 매일 오전 11시와 오후 11시에 정기적으로 Weibo의 핫 검색 목록을 크롤링하고 Markdown 파일 형식으로 저장한 다음 GitHub에 업로드하고 백업할 수 있습니다. .

왜 11의 두 시점을 선택했는지 묻지 마세요. 왜냐하면 저는 항상 이 두 시점 즈음에 큰 사건이 일어날 것이라고 느끼기 때문입니다.

웨이보에서 가장 핫한 검색어가 가정사, 국정, 세계사, 연예계 가십 등 무엇이든 충실하게 기록하고 싶을 뿐입니다...

운영 환경

파이썬 3.0+

 pip install requests

pip install lxml

pip install bs4

또는 실행

 pip install -r requirements.txt

설치 및 작동에 필요한 환경

달리다

• 필요한 실행 환경을 준비했는지 확인하세요.
• 실행 방법(하나 선택)
  1. 웨어하우스 디렉터리에서 weibo_Hot_Search_bs4.py (신규) 또는 weibo_Hot_Search.py 실행하세요.
  2. cmd에서 python weibo_Hot_Search_bs4.py (신규) 또는 python weibo_Hot_Search.py ​​실행
• 자동 실행: Windows 작업 스케줄러를 사용하여 이를 달성합니다.

파일 생성

실행 후 현재 폴더에 다음과 같이 time이라는 이름의 폴더가 생성됩니다.

 2019年11月08日

(업데이트됨) 및 특정 시간의 특정 시간으로 이름이 지정된 Markdown 파일이 다음과 같이 생성됩니다.

 2019年11月08日15点.md

(계속 업데이트) 다음과 같이 특정 시간, 특정 시간이라는 이름의 csv 파일이 생성됩니다.

 2020年08月27日00点.csv

인터페이스 소스

Sina Weibo의 공개 핫 검색 목록 링크가 사용됩니다: https://s.weibo.com/top/summary/

성명

이 프로젝트의 모든 데이터 소스는 Sina Weibo에서 제공됩니다. 데이터 콘텐츠 및 해석 권한은 Sina Weibo에 있습니다.

정보 업데이트

7월 31일

1. bs4 메소드 추가
   • 새로운 파일 weibo_Hot_Search_bs4.py 를 추가했습니다.
2. 데이터 저장 형식 최적화
   • bs4 방법의 데이터는 ./bs4版数据/ 디렉터리에 저장됩니다. 저장 데이터 형식은序号-标题-热度（或置顶） 입니다. 이 형식은 처리하기 쉽고 후속 데이터 시각화 및 기타 분석을 용이하게 합니다.
3. 알아채다
   • 데이터 파일은 모두 .md 형식으로 저장되어 있으므로 메모장이나 유사한 소프트웨어를 사용하여 여는 것이 좋습니다.

8월 5일

1. bs4 버전은 나중에 데이터 분석에 더 도움이 되는 .csv 저장 형식으로 수정되었습니다.
2. 새로운 .csv 파일은 bs4[.csv]版数据폴더에 저장됩니다.

8월 9일

1. 설명 추가: bs4[txt]版数据및 lxml版数据모두 중지되었습니다. 새로운 데이터는 bs4[.csv] 버전 데이터 파일에 저장됩니다.

특허

GNU 일반 공중 라이선스 v3.0