browsertrix

Kode sumber lainnya

Unduh

Browsertrix adalah layanan perayapan berbasis browser cloud-native, fidelitas tinggi, yang dirancang untuk membuat pengarsipan web lebih mudah dan lebih mudah diakses oleh semua orang.

Layanan ini menyediakan API dan UI untuk menjadwalkan perayapan dan melihat hasil, serta mengelola semua aspek proses perayapan. Sistem ini menyediakan orkestrasi dan manajemen seputar perayapan, sedangkan perayapan sebenarnya dilakukan menggunakan wadah Browsertrix Crawler, yang diluncurkan untuk setiap perayapan.

Lihat webrecorder.net/browsertrix untuk ikhtisar fitur dan informasi tentang cara mendaftar ke layanan Browsertrix yang dihosting Webrecorder.

Dokumentasi

Dokumen lengkap untuk menggunakan, menerapkan, dan mengembangkan Browsertrix tersedia di docs.browsertrix.com.

Dokumen kami dibuat dengan Material untuk MKDocs.

Penyebaran

Dokumentasi penerapan terbaru tersedia di docs.browsertrix.com/deploy.

Dokumen tersebut mencakup penerapan Browsertrix di berbagai lingkungan menggunakan Kubernetes, mulai dari penyiapan node tunggal hingga cluster yang dapat diskalakan di cloud.

Awalnya, Browsertrix juga mendukung Docker Compose dan penerapan berbasis podman. Hal ini tidak lagi digunakan karena rumitnya menjaga paritas fitur di berbagai pengaturan, dan dengan tersedianya berbagai opsi penerapan Kubernetes dan mudah diterapkan, bahkan pada satu mesin.

Menjadikan penerapan Browsertrix semudah mungkin tetap menjadi tujuan utama, dan kami menerima saran mengenai bagaimana kami dapat lebih meningkatkan opsi penerapan Kubernetes.

Jika Anda hanya ingin mencoba menjalankan satu perayapan, Anda mungkin ingin mencoba Perayap Browsertrix terlebih dahulu untuk menguji kemampuan perayapan.

Berkontribusi

Meskipun sistem dan API backend cukup stabil, kami sedang mengerjakan banyak fitur tambahan. Silakan lihat masalah GitHub dan Proyek GitHub ini untuk mengetahui rencana dan tugas proyek kami saat ini.

Panduan untuk memulai pengembangan lokal tersedia di docs.browsertrix.com/develop.