PySipder 크롤러 프로그램 v0.3.10

PySipder는 Python 크롤러 프로그램입니다.

PySipder 기능

Python을 사용하여 스크립트를 작성하고 강력한 API 제공

파이썬 2&3

강력한 WebUI 및 스크립트 편집기, 작업 모니터링, 프로젝트 관리 및 결과 보기

JavaScript 페이지 지원

백엔드 시스템 지원: MySQL, MongoDB, SQLite, Postgresql

작업 우선순위, 재시도, 정기 크롤링 등을 지원합니다.

분산 아키텍처