设为首页收藏本站

切换到宽版

全球主机交流论坛»论坛 › 主机综合交流 › 美国VPS综合讨论 › 谁知道google 爬虫是咋写的

网络延迟测速工具

会员请立即修改密码

12 / 2 页

发新帖

楼主: bluevm

上一主题

下一主题

谁知道google 爬虫是咋写的

zhuban zhuban 当前离线积分 5630	11^# 发表于 2020-12-29 07:08:06 来自手机 \| 只看该作者提示: 作者被禁止或删除内容自动屏蔽
zhuban zhuban 当前离线积分 5630
	回复支持反对举报

12^#

发表于 2020-12-29 07:10:45 来自手机 | 只看该作者

类似于google爬虫的代码在github一大把，自己研究去

回复支持反对

13^#

发表于 2020-12-29 07:31:39 来自手机 | 只看该作者

google翻几页就限制ip，得循环多ip. 才能实现啊

回复支持反对

14^#

发表于 2020-12-29 07:50:45 | 只看该作者

2016年google有250万台server

回复支持 1 反对 0

花样撸管冠军

15^#

发表于 2020-12-29 08:42:30 来自手机 | 只看该作者

知识盲区，不懂

回复支持反对

16^#

发表于 2020-12-29 13:16:31 来自手机 | 只看该作者

说起来你们可能不信，g家还是用的mjj提供的小鸡来爬数据的

回复支持反对

17^#

发表于 2020-12-29 13:19:22 | 只看该作者

并发几十就到极限了，你在古董路由器上跑吗？

回复支持反对

12 / 2 页

发新帖

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2026-1-18 02:17 , Processed in 0.069106 second(s), 9 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表