Hetzner 独立服务器 tumblr采集.. 开足马力，冲啊!

openos

cw723 发表于 2018-3-14 16:29
什么爬虫？

求推荐。

https://github.com/dixudx/tumblr-crawler

cw723

openos 发表于 2018-3-14 16:32
缓存10G的常用图片就够了.

缓存10G 图片。
G口跑满。

你的网站流量很大哦。

还都是境外流量

atcaoyufei

openos 发表于 2018-3-14 16:32
缓存10G的常用图片就够了.

你网站 表示帝都电信打不开了，要扶墙

cw723

openos 发表于 2018-3-14 16:33
https://github.com/dixudx/tumblr-crawler

也是像是随便爬的爬虫呀。

openos

cw723 发表于 2018-3-14 16:43
缓存10G 图片。
G口跑满。

搜索路过图床

openos

atcaoyufei 发表于 2018-3-14 16:44
你网站 表示帝都电信打不开了，要扶墙

有些地方把阿里云的443端口屏蔽了，不想动了，反正没几个人看，想看的人自己想办法

左手写爱

我去 已经下载100G了   

硬盘不够用了

openos

速度下来了，可能正在采集图片....

sm1314

楼主Hetzner装的什么系统呀

yjlml

sm1314 发表于 2018-3-14 17:56
楼主Hetzner装的什么系统呀

BT面板