shopify burst crawler
1.0.0
โปรแกรมรวบรวมข้อมูลอย่างง่ายในการดาวน์โหลดข้อมูลเมตาสำหรับรูปภาพสต็อกทั้งหมดจากเว็บไซต์ Shopify Burst: https://burst.shopify.com รองรับการรวบรวมข้อมูล 2 โหมด:
โปรแกรมรวบรวมข้อมูลทั้งสองรองรับ API เดียวกัน:
BurstCrawler crawler = new BurstCrawler ();
// or you could use the Sitemap crawler
crawler = new BurstSitemapCrawler ();
// this will crawl and return the entire bunch of results
// it is slow and may take a lot of time
List < BurstImage > images = crawler . crawl ();
// a streaming version if also available
GenericConsumer < BurstImage > collector = new GenericConsumer < BurstImage >() {
@ Override
public boolean consume ( BurstImage image ) {
// do something with the image
// ...
// return a true if you want to continue crawling
// or return, a false to stop the crawling
return true ;
}
};
crawler . crawl ( collector );
JAR
สแน็ปช็อตการพัฒนาปัจจุบันสามารถรับได้โดยใช้ JitPack.io
เป็น:
เพิ่ม repository
ต่อไปนี้ใน Maven
< repository >
< id >jitpack.io</ id >
< url >https://jitpack.io</ url >
</ repository >
จากนั้นเพิ่มการพึ่งพาเป็น
< dependency >
< groupId >com.github.sangupta</ groupId >
< artifactId >shopify-burst-crawler</ artifactId >
< version >1.0.0-SNAPSHOT</ version >
</ dependency >
เพื่อความโปร่งใสและข้อมูลเชิงลึกเกี่ยวกับวงจรการเปิดตัวของเรา และเพื่อมุ่งมั่นที่จะรักษาความเข้ากันได้แบบย้อนหลัง โปรเจ็กต์นี้จะได้รับการดูแลภายใต้แนวทางการกำหนดเวอร์ชันแบบความหมายให้มากที่สุด
การเผยแพร่จะมีหมายเลขตามรูปแบบต่อไปนี้:
<major>.<minor>.<patch>
และสร้างโดยมีแนวทางดังนี้
สำหรับข้อมูลเพิ่มเติมเกี่ยวกับ SemVer กรุณาเยี่ยมชมที่ http://semver.org/
shopify-burst-crawler
Copyright (c) 2017-2019, Sandeep Gupta
https://sangupta.com/projects/shopify-burst-crawler
Licensed under the Apache License, Version 2.0 (the "License");
you may not use this file except in compliance with the License.
You may obtain a copy of the License at
http://www.apache.org/licenses/LICENSE-2.0
Unless required by applicable law or agreed to in writing, software
distributed under the License is distributed on an "AS IS" BASIS,
WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
See the License for the specific language governing permissions and
limitations under the License.