pengikis kayu

vkscraper

Unduh postingan, foto, dan video beserta keterangannya dan metadata lainnya dari ВКонтакте.

Fitur

• Unduh postingan, foto, dan video dari profil dan komunitas pengguna.
• Dibuat dengan mempertimbangkan pengarsip: sinkronisasi tambahan.
• Metadata JSON disimpan bersama media.
• File batch, ramah cronjob.

Penggunaan

Otentikasi

 $ vkscraper --login=MyUsername [--password=MyPassword] [...]

Saat masuk, vkscraper menyimpan token akses dalam file bernama ./MyUsername.vksession , yang akan digunakan kembali nanti saat --login diberikan. Jangan hapus file sesi, login adalah operasi yang mahal.

Mengunduh pengguna dan komunitas

$ vkscraper --login=MyUsername insidevk

Secara default, semua konten yang tersedia akan diunduh.

Opsi arsip

• --no-photos
• --no-posts
• --no-stories
• --no-tagged-photos
• --no-videos

Struktur direktori

 .
├── photos
│   ├── 2022-03-02T10:20:28Z (34894549853).jpg
│   └── 2022-03-02T10:20:28Z (34894549853).json
├── posts
│   ├── 2022-03-02T10:20:15Z (14312312311).json
│   └── 2022-03-02T10:20:15Z (14312312311).txt
├── stories
│   ├── 2022-01-01T10:20:15Z (54894549852).jpg
│   ├── 2022-01-01T10:20:15Z (54894549852).json
│   ├── 2022-01-01T10:20:28Z (54894549853).mp4
│   └── 2022-01-01T10:20:28Z (54894549853).json
├── tagged_photos
│   ├── 2022-03-02T10:20:28Z (84893123153).jpg
│   └── 2022-03-02T10:20:28Z (84893123153).json
├── videos
│   ├── 2022-01-01T10:20:28Z (64812111853).mp4
│   └── 2022-01-01T10:20:28Z (64812111853).json
├── meta.json
└── id

Berkas kumpulan

vkscraper dapat membaca profil pengguna dan komunitas dari sebuah file. Baris yang dimulai dengan # atau baris kosong dianggap sebagai komentar dan diabaikan. Komentar sebaris juga diabaikan.

Mengingat DataHoarder.txt :

 # Official VK community
insidevk

klavdiacoca # Inline comment 1; Клава Кока; profile
klavacoca   # Inline comment 2; Клава Кока; community

Unduh cerita, foto, video, dan postingan:

$ vkscraper --login=MyUsername --batch-file=DataHoarder.txt

Pembaruan cepat

Untuk setiap target, berhenti ketika menemukan sumber daya pertama yang sudah diunduh. Opsi ini disarankan ketika Anda menggunakan vkscraper untuk memperbarui arsip pribadi Anda.

Opsi ini diambil dari Instaloader.

$ vkscraper --login=MyUsername --fast-update insidevk

API

vkscraper tidak dimaksudkan untuk menjadi klien API komprehensif untuk VK. Fungsi dan struktur yang digunakan secara internal dapat diimpor sebagai perpustakaan.

 import "github.com/kandayo/vkscraper/pkg/vk"

vk := vk . NewClient ()

// Login with a username and password.
vk . Login ( "username" , "password" )
// Or set an access token.
vk . SetAccessToken ( "token" )

// Find the user or community id.
user , err := vk . Utils . ResolveScreenName ( "klavacoca" )

// Retrieve the user stories feed.
stories , err := vk . Stories . Get ( user . ID )

perPage := 100
initialOffset := 0

// Retrieve the user photos.
stories , err := vk . Photos . GetAll ( user . ID , perPage , initialOffset )

// Retrieve the user videos.
stories , err := vk . Videos . Get ( user . ID , perPage , initialOffset )