全球主机交流论坛

标题: ZSKY怎么快速爬磁力链接,400W数据就瓶颈了,有卖数据库的没 [打印本页]

作者: 设计师    时间: 2021-1-28 09:34
标题: ZSKY怎么快速爬磁力链接,400W数据就瓶颈了,有卖数据库的没
用zsky搭建了个磁力站,数据到400W后每天就只能增加几百个链接了, 我看别人的站都是4000W的数据,这猴年马月才能追赶上!

有卖数据库的吗,可以pm数据和价格 ,
作者: tir    时间: 2021-1-28 09:35
推荐自建云数据库,他不香吗?  哈哈
作者: sky21022    时间: 2021-1-28 09:36
上一千,数据库就不行了,大佬怎么解决?
作者: 设计师    时间: 2021-1-28 09:39
sky21022 发表于 2021-1-28 09:36
上一千,数据库就不行了,大佬怎么解决?

我更惨 400W就不行了,
作者: biu    时间: 2021-1-28 09:43
用的什么机器
作者: hdwan.net    时间: 2021-1-28 09:45
磁力搜索引擎ZSKY一键安装包_有关计算机的感悟-CSDN博客
https://blog.csdn.net/magrco/article/details/83752451
作者: 设计师    时间: 2021-1-28 09:47
biu 发表于 2021-1-28 09:43
用的什么机器

e3 8H16G 杜甫 CPU和内存都跑不满  CPU占用一直18%
我改了simdht_worker.py里的max_node_qsize= 没啥用啊
作者: loliwin    时间: 2021-1-28 09:49
互联网上面活跃的种子就这么多,你配置再高,线程数开再大,爬到一定程度就只能慢慢积累了。

我已经积累的3000w了。
作者: 设计师    时间: 2021-1-28 09:49
hdwan.net 发表于 2021-1-28 09:45
磁力搜索引擎ZSKY一键安装包_有关计算机的感悟-CSDN博客
https://blog.csdn.net/magrco/article/details/83 ...

这个没什么特别的啊,就是一个README.md
作者: 设计师    时间: 2021-1-28 09:51
loliwin 发表于 2021-1-28 09:49
互联网上面活跃的种子就这么多,你配置再高,线程数开再大,爬到一定程度就只能慢慢积累了。

我已经积累的 ...

厉害了,你这挂了多久才到3000W的啊,是zsky吗,数据库能分享下嘛,可付费。
作者: sky21022    时间: 2021-1-28 10:22
设计师 发表于 2021-1-28 09:39
我更惨 400W就不行了,

mjj,是一千万
作者: a87750530    时间: 2021-1-28 10:33
只能说你的服务器带宽不够,建议跑这个10G独立带宽起步!然后nvme硬盘
作者: why?    时间: 2021-1-28 10:37
上es
作者: buddha    时间: 2021-1-28 10:49
弄这个能挣钱不,有几台闲置机器




欢迎光临 全球主机交流论坛 (https://ddzzz.eu.org/) Powered by Discuz! X3.4