抓取网页报403错误爬虫解决403禁止訪问错误方法

一般就是被禁止了，加上对应的header参数就可以了要具体分析正常访问时需要那些头信息
其中User-Agent是浏览器特有的属性，通过浏览器F12调试器就可以看到

获取浏览器类型的User-Agent信息在自定义函数中需要写出自己的Host,Referer,GET信息等，
解决这几个问题就可以顺利访问了，不再出现403禁圵访问了
如果访问频率过快的话需要用到代理IP的方法。