pixiv-main v1.1.2

• 适配pixiv-engine v1.2.0

pixiv-main v1.1.1

• 修复bug

pixiv-main v1.1.0

Pixiv爬虫
加入断点续爬功能

启动参数:
-l 从crawler加载.crawler断点续爬文件
-c 从config加载.crawler.properties爬虫配置文件
-t 从包中的模板配置文件加载(通常需要再次修改)

pixiv-main v1.0.2

Pixiv爬虫
HttpApi: /crawlCount 爬虫状态监视

config.properties配置指南:
URL: pixiv_data数据库的jpbc url
USERNAME: pixiv_data 数据库的用户名
PASSWORD: pixiv_data 数据库的用户密码
DATA_FORWARD_SERVER: 作品信息数据转发服务器，可添加多个，使用 ; 分割
PICTURE_FORWARD_SERVER: 图片文件数据转发服务器，可添加多个，使用 ; 分割 (当前版本未实现图片相关功能 目前无用)
KEY: 在 pixiv_web_data 数据库中对应用户的key
START: 开始爬取的作品id
STOP: 结束爬取的作品id
WORKER_COUNT: 线程数

此次修订:

• 修改pixiv-engine版本

pixiv-main v1.0.1

Pixiv爬虫
HttpApi: /crawlCount 爬虫状态监视

config.properties配置指南:
URL: pixiv_data数据库的jpbc url
USERNAME: pixiv_data 数据库的用户名
PASSWORD: pixiv_data 数据库的用户密码
DATA_FORWARD_SERVER: 作品信息数据转发服务器，可添加多个，使用 ; 分割
PICTURE_FORWARD_SERVER: 图片文件数据转发服务器，可添加多个，使用 ; 分割 (当前版本未实现图片相关功能 目前无用)
KEY: 在 pixiv_web_data 数据库中对应用户的key
START: 开始爬取的作品id
STOP: 结束爬取的作品id
WORKER_COUNT: 线程数

此次修订:

• 调整线程池线程数

pixiv-main v1.0.0

Pixiv爬虫
HttpApi: /crawlCount 爬虫状态监视

config.properties配置指南:
URL: pixiv_data数据库的jpbc url
USERNAME: pixiv_data 数据库的用户名
PASSWORD: pixiv_data 数据库的用户密码
DATA_FORWARD_SERVER: 作品信息数据转发服务器，可添加多个，使用 ; 分割
PICTURE_FORWARD_SERVER: 图片文件数据转发服务器，可添加多个，使用 ; 分割 (当前版本未实现图片相关功能 目前无用)
KEY: 在 pixiv_web_data 数据库中对应用户的key
START: 开始爬取的作品id
STOP: 结束爬取的作品id
WORKER_COUNT: 线程数 (建议10个)