采集一个站用了一个月,还没采完

21andy · 发表于 2013-10-13 13:45:26

美国VPS 10进程跑, 尼玛光图片一个500G的硬盘已经填满了还没采完, 目测要1T至1.5T间
就生一个尺寸的缩图又填满了个100G的VPS, 继续加强分布方案中
做垃圾站也不容易啊, 光这个站现在缩图就要4个VPS, 几个尺寸的缩图用2个, 其他2个做同步备份和负载均衡, 大图得用1.5T的2台独服
前端和数据库再用2个高性能VPS, 累啊

leomy · 发表于 2013-10-13 13:47:51

尼玛是要把新浪采集下来吗？

东方星雨 · 发表于 2013-10-13 18:41:43

这采集牛逼啊

hxhui · 发表于 2013-10-13 18:42:49

牛逼啊..

jlbslqqs · 发表于 2013-10-13 18:46:53

惊天动地的节奏,矿山吗？

junhan · 发表于 2013-10-13 18:55:14

把源站亮出来看看吧~~

rqliang · 发表于 2013-10-13 19:16:10

这个是什么站呢这个数据你这是在采矿吗?

thymol · 发表于 2013-10-13 19:46:33

提示: 作者被禁止或删除内容自动屏蔽

wang3y2 · 发表于 2013-10-13 19:55:07

这是要采集1024的节奏啊

瘦够了 · 发表于 2013-10-13 20:04:18

土豪啊，这么做挣钱么？

		自动登录	找回密码
密码			注册

thymol thymol 当前离线积分 5272	8^# 发表于 2013-10-13 19:46:33 \| 只看该作者提示: 作者被禁止或删除内容自动屏蔽
thymol thymol 当前离线积分 5272
	回复支持反对举报