大家每天采集数据吗？这是我每天必不可少的任务

独家记忆 · 发表于 2022-3-29 13:36:01

还挺好的吧，百度日抓取几十万到几百万不等

Crystαl · 发表于 2022-3-29 13:36:52

首先要看你网站是做什么的，然后网站用的什么程序，根据自己需求弄

IT618发布 · 发表于 2022-3-29 13:37:43

厉害啊。。 txt都发到哪些平台去了？

Crystαl · 发表于 2022-3-29 13:38:25

我也不知道啊，成千上万的网站呢，你看外链总数千万了都大家每天采集数据吗？这是我每天必不可少的任务

IT618发布 · 发表于 2022-3-29 13:38:58

看到这个网址，我有印象了。。你就是多个轻量云做负载均衡的大佬。

浅生 · 发表于 2022-3-29 13:39:05

目前37台服务器了...轻量云只跑流量，不跑性能，服务器是32核64G的

Crystαl · 发表于 2022-3-29 13:39:19

大佬用的火车头采集吗~

IT618发布 · 发表于 2022-3-29 13:39:29

是啊是啊，买的2个火车头永久授权

拾光 · 发表于 2022-3-29 13:40:00

牛啊。这么多台服务器只为了这个站服务吗？

TyCoding · 发表于 2022-3-29 13:40:21

不是啊，一共21个站

电梯直达
评论19