采集一个站用了一个月,还没采完

21andy · 发表于 2013-10-13 13:45:26

美国VPS 10进程跑, 尼玛光图片一个500G的硬盘已经填满了还没采完, 目测要1T至1.5T间
就生一个尺寸的缩图又填满了个100G的VPS, 继续加强分布方案中
做垃圾站也不容易啊, 光这个站现在缩图就要4个VPS, 几个尺寸的缩图用2个, 其他2个做同步备份和负载均衡, 大图得用1.5T的2台独服
前端和数据库再用2个高性能VPS, 累啊

Tou · 发表于 2013-10-14 13:21:37

21andy.com?

cnmkdq · 发表于 2013-10-14 13:12:49

明显采集不行，放原站大家帮忙分布式采集

qqcm · 发表于 2013-10-14 13:07:51

土豪，交个朋友吧！

dreamkite · 发表于 2013-10-14 13:01:07

nodhost 发表于 2013-10-14 00:00
求观赏

同求

ccloving · 发表于 2013-10-14 08:11:08

什么采集工具这么落后？

22116188 · 发表于 2013-10-14 02:45:24

。。。。。。。。。。。那么庞大。为毛不反代啊

txjcv · 发表于 2013-10-14 00:37:15

什么网站

nodhost · 发表于 2013-10-14 00:00:09

求观赏来自: iPhone客户端

skycood · 发表于 2013-10-13 23:10:31

提示: 作者被禁止或删除内容自动屏蔽

		自动登录	找回密码
密码			注册

skycood skycood 当前离线积分 1180	15^# 发表于 2013-10-13 23:10:31 \| 只看该作者提示: 作者被禁止或删除内容自动屏蔽
skycood skycood 当前离线积分 1180
	回复支持反对举报

采集一个站用了一个月,还没采完

浏览过的版块