本文主要是介绍记录一次Crawl遇到的301重定向问题，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！
在浏览器中打开网页正常运行，模拟浏览器运行就会返回301永久重定向，这是网站设置的一种反PA机制，那么我们在requests.get()中设置allow_redirects=False,将允许重定向设置为FALSE，
res = requests.get(url=s, headers=self.headers2, allow_redirects=False, timeout=50).headers['Location']我们可以获取重定向返回的地址，再次发起一次请求，就可以返回成功
requests.get(url=wen, headers=self.headers2, allow_redirects=False, timeout=50).text我们打印返回结果就可以发现可以正常返回，为了被封IP，建议设置timeout。
这篇关于记录一次Crawl遇到的301重定向问题的文章就介绍到这儿，希望我们推荐的文章对编程师们有所帮助！
