论坛 › Web技术 › 91到底有多大空间？我用2TB的OP爬取 能爬取的完么额？

cw723 发表于 2018-7-20 10:26:59

91到底有多大空间？我用2TB的OP爬取 能爬取的完么额？

本帖最后由 cw723 于 2018-7-20 19:33 编辑

91到底有多大空间？我用2TB的OP爬取 能爬取的完么额？


目前抓了1天 抓了900多GB

全球资源提供商 发表于 2018-7-20 13:09:54

本帖最后由 全球资源提供商 于 2018-7-20 22:39 编辑

91 非VIP 全站视频 截止这个发帖时间

数量97054个
硬盘2076 GB


https://i.loli.net/2018/07/20/5b516c9556dec.png


本来打算分享的
不过我这个格式分享没什么用
一个原因你没数据对应, 就 无法还原为标题模式
二个原因N台服务器带宽满负载了

kingshui 发表于 2018-7-20 12:19:17

91那个网站真心垃圾，却能引来那么多原创。。。说明背后关系甚远，技术不行。。。

是时候组建一个如抖音一样的91了

shen2214 发表于 2018-7-20 19:24:00

他们说的91并不是91助手而是91**,是国内狼友的原创基地

洛克 发表于 2018-7-20 18:02:00

static/image/smiley/default/lol.gif

贱人就是矫情 发表于 2018-7-20 13:18:00

你们总说 91 91 到底是啥？

notetaker 发表于 2018-7-20 12:46:00

可以的，

wenguonideshou 发表于 2018-7-20 15:00:09

贱人就是矫情 发表于 2018-7-20 10:30

你们总说 91 91 到底是啥？
91手机助手

ImetSu 发表于 2018-7-20 10:27:30

我很好奇大佬都是自己写脚本爬么

yzg9540 发表于 2018-7-20 10:30:18

有大佬说不到3t

有兴趣爬高清啊

查看完整版本: 91到底有多大空间？我用2TB的OP爬取 能爬取的完么额？