ADVERTISEMENT
返回
  • 浏览过的版块

1
ADVERTISEMENT
Huaren
等级中尉
威望2
贴子2245
魅力4159
注册时间2016-08-24

rewish

只看楼主

请问下华人网站不允许web scraping 吗?

845

4

2022-02-16 14:41:25

在学习web scraping,就想着拿华人网来吧结果华人网不让我的IP访问了。另外问下,web scraping的时候应该注意哪些问题呢?

6142981

Huaren
等级上校
威望5
贴子4771
魅力7142
注册时间2017-11-29

ivoryzz

只看他

2022-02-16 14:43:56

你搓的太频繁了 给网站造成了负担

你可以试试每次搓之后 停留1分钟 然后再搓

Sleep(60)

Huaren
等级中尉
威望2
贴子2245
魅力4159
注册时间2016-08-24

rewish

只看楼主

2022-02-16 14:48:37

你搓的太频繁了 给网站造成了负担

你可以试试每次搓之后 停留1分钟 然后再搓

Sleep(60)


ivoryzz 发表于 2022-02-16 14:43

我好像没太频繁呢,我数了下就六次

Huaren
等级超级版主
威望5
贴子325
魅力1543
注册时间2018-09-12

超级版主e

只看他

2022-02-16 14:56:35

感谢反馈,会有专门负责的版务跟进处理。

Huaren
等级管理员
威望104
贴子8145
魅力103747
注册时间2003-01-27

论坛管理员

只看他

2022-02-16 22:36:15

在学习web scraping,就想着拿华人网来吧结果华人网不让我的IP访问了。另外问下,web scraping的时候应该注意哪些问题呢?

6142981


rewish 发表于 2022-02-16 14:41

web scraping 你指什么操作? 能具体描述下吗。 thanks

初始化编辑器...

到底了