木刮刀

刮刀

从 ВКонтакте 下载帖子、照片和视频及其标题和其他元数据。

特征

• 从用户个人资料和社区下载帖子、照片和视频。
• 为档案管理员而构建：增量同步。
• JSON 元数据与媒体一起存储。
• 批处理文件，cronjob 友好。

用法

验证

 $ vkscraper --login=MyUsername [--password=MyPassword] [...]

登录时， vkscraper将访问令牌存储在名为./MyUsername.vksession的文件中，该文件将在下次给出--login时重用。不要删除会话文件，登录是一个昂贵的操作。

下载用户和社区

$ vkscraper --login=MyUsername insidevk

默认情况下，将下载所有可用内容。

存档选项

• --no-photos
• --no-posts
• --no-stories
• --no-tagged-photos
• --no-videos

目录结构

 .
├── photos
│   ├── 2022-03-02T10:20:28Z (34894549853).jpg
│   └── 2022-03-02T10:20:28Z (34894549853).json
├── posts
│   ├── 2022-03-02T10:20:15Z (14312312311).json
│   └── 2022-03-02T10:20:15Z (14312312311).txt
├── stories
│   ├── 2022-01-01T10:20:15Z (54894549852).jpg
│   ├── 2022-01-01T10:20:15Z (54894549852).json
│   ├── 2022-01-01T10:20:28Z (54894549853).mp4
│   └── 2022-01-01T10:20:28Z (54894549853).json
├── tagged_photos
│   ├── 2022-03-02T10:20:28Z (84893123153).jpg
│   └── 2022-03-02T10:20:28Z (84893123153).json
├── videos
│   ├── 2022-01-01T10:20:28Z (64812111853).mp4
│   └── 2022-01-01T10:20:28Z (64812111853).json
├── meta.json
└── id

批处理文件

vkscraper可以从文件中读取用户配置文件和社区。以#或空行开头的行被视为注释并被忽略。内嵌注释也会被忽略。

给定DataHoarder.txt ：

 # Official VK community
insidevk

klavdiacoca # Inline comment 1; Клава Кока; profile
klavacoca   # Inline comment 2; Клава Кока; community

下载故事、照片、视频和帖子：

$ vkscraper --login=MyUsername --batch-file=DataHoarder.txt

更新快

对于每个目标，当遇到第一个已下载的资源时停止。当您使用vkscraper更新个人存档时，建议使用此选项。

此选项取自 Instaloader。

$ vkscraper --login=MyUsername --fast-update insidevk

应用程序编程接口

vkscraper并不是 VK 的综合 API 客户端。内部使用的函数和结构可以作为库导入。

 import "github.com/kandayo/vkscraper/pkg/vk"

vk := vk . NewClient ()

// Login with a username and password.
vk . Login ( "username" , "password" )
// Or set an access token.
vk . SetAccessToken ( "token" )

// Find the user or community id.
user , err := vk . Utils . ResolveScreenName ( "klavacoca" )

// Retrieve the user stories feed.
stories , err := vk . Stories . Get ( user . ID )

perPage := 100
initialOffset := 0

// Retrieve the user photos.
stories , err := vk . Photos . GetAll ( user . ID , perPage , initialOffset )

// Retrieve the user videos.
stories , err := vk . Videos . Get ( user . ID , perPage , initialOffset )