套了CF的站，如何爬虫，curl 和wget都是403

我要怕这个站的信息

http://www.shichengbbs.com

用curl 和wget都是403

如何破
广西网友:设置user-agent
安徽网友:这个站好像也是个爬虫站吧，你去爬他做啥
山西网友:
好像没出现403呢
山东网友:无解 除非你本地用服务器ip 做代理，然后浏览器主动过下验证，否则无解
河南网友:我照着你的命令，就是抓不到呢

就是去 CF了
湖北网友:来骗IP+1的吧~
本地windows用curl跟小鸡用curl都正常得到网页，如楼上4楼图~
是不是你撞上5秒盾或类似的判断机制了？
黑龙江网友:
陕西网友:
会不会是 你用国外IP访问的原因
湖北网友:确实是IP问题，
换个IP就好了

这个站有防采集的设置
广西网友:确实是IP问题，
换个IP就好了

这个站有防采集的设置
河南网友:控制好频率，测试下范围

以上信息转载自Hostloc。

未经允许不得转载：美国VPS_搬瓦工CN2 GIA VPS » 套了CF的站，如何爬虫，curl 和wget都是403