scrapy可以支持重定向,有以下方法: 在请求时带上meta 1234 scrapy.Request(self.start_urls[0], headers=self.headers, meta={ 'dont_redirect': True, 'handle_httpstatus_list': [301] # 这个列表为阻止重定向的请求码 }) 赞微海报分享
近期评论