Mortgage Scraper 다운로드 - Mortgage Scraper 소스 코드 다운로드

Mortgage Scraper

기타 소스코드

1.0.0

다운로드

moneysupermarket.com 모기지 스크레이퍼

moneysupermarket.com Mortgage Scraper는 Python으로 작성되었습니다. 이 코드는 http://www.moneysupermarket.com에서 모기지를 긁어 모으고 모기지 세부 사항을 SQL 데이터베이스에 삽입합니다.

첫 번째 집을 사고 싶었을 때이 코드를 만들었습니다. 나는 모기지 제안을 계속 주시하여 시장 동향을 계속 주시 할 수있었습니다. 그런 다음 모기지를 비교하여 가장 좋은 거래를 찾기 위해 몇 가지 쿼리를 쉽게 실행할 수있었습니다.

소스 파일

Mortgage.py - 데이터를 SQL 데이터베이스에 삽입하는 '저장'방법과 함께 각 모기지 오퍼링에 대한 모든 정보를 저장합니다.
results.py - 특정 모기지 링크로 분류되는 각 결과 페이지의 모든 정보를 저장하고 순서대로 더 많은 결과 페이지에 대한 링크 (예 : 'show more'링크).
scrapemortgage.py - 모기지 URL이 주어지면 모기지 대상을 생성하고 채 웁니다.
scraperesults.py - 모기지 URL이 주어지면 결과 객체를 생성하고 채 웁니다.
scrapesequence.py - 이것은 일련의 모기지를 통해 스크 레이터스 (scraperesults)와 스크랩 메모르그를 부르며 모든 모기지를 통과합니다.

사용 지침

이것들은 당신을 시작하기위한 몇 가지 지침입니다.

SQL 데이터베이스

SQL 데이터베이스에서 다음 쿼리를 실행하여 테이블을 만듭니다.

 CREATE TABLE ` mortgages ` (
  ` id ` int ( 11 ) NOT NULL AUTO_INCREMENT,
  ` rundate ` date NOT NULL ,
  ` url ` varchar ( 500 ) NOT NULL DEFAULT ' ' ,
  ` lender ` text NOT NULL ,
  ` typeOfMortgage ` text NOT NULL ,
  ` borrowAmount ` decimal ( 10 , 2 ) NOT NULL ,
  ` houseValue ` decimal ( 10 , 2 ) NOT NULL ,
  ` term ` int ( 2 ) NOT NULL ,
  ` initialRate ` text NOT NULL ,
  ` revertRate ` text NOT NULL ,
  ` maxLTV ` text NOT NULL ,
  ` initialPeriod ` text NOT NULL ,
  ` minMaxMortgageAmount ` text NOT NULL ,
  ` minimumAge ` text NOT NULL ,
  ` initialMonthlyRepayments ` text NOT NULL ,
  ` monthlyRepaymentsAfter ` text NOT NULL ,
  ` totalAmountToRepay ` decimal ( 10 , 2 ) NOT NULL ,
  ` TotalAmountOfInterest ` decimal ( 10 , 2 ) NOT NULL ,
  ` overpayments ` text NOT NULL ,
  ` paymentHolidays ` text NOT NULL ,
  ` portable ` text NOT NULL ,
  ` cashback ` text NOT NULL ,
  ` fees ` decimal ( 10 , 2 ) NOT NULL ,
  ` valuationReport ` text NOT NULL ,
  ` homebuyerSurvey ` text NOT NULL ,
  PRIMARY KEY ( ` id ` )
) ENGINE = MyISAM DEFAULT CHARSET = latin1;