크롤러의 간단한 컬렉션
# 1. URL을 수집하는 함수만 만들었습니다. 데이터를 데이터베이스에 저장해야 하는 경우에는 parsData 함수에 처리 코드를 작성하면 됩니다.
# 2. sqlite3 또는 pysqlite 지원이 필요합니다.
# 3. DreamHost.com 공간에서 실행 가능
# 4. User-Agent를 수정하여 검색 엔진 스파이더인 척할 수 있습니다.
# 5. 일시 정지 시간을 설정하고 수집 속도를 제어할 수 있습니다.
확장하다