阿神
浏览量7938 | 粉丝169 | 关注37
2017-04-18 10:16:50
2017-04-18 10:16:38
python - scrapy302重定向问题
我用scrapy框架写了个简单的爬虫,爬取安居客上房源信息。最初能够正确爬下来,之后可能请求次数太多酒重定向到验证码页面,我试着加了headers和禁止了重定向中间件依旧无法访问。不知该如何解决代码如下: {代码...
0
1
1760
2017-04-18 10:16:36
python requests 无法获得cookies
简单的一个访问dotamax的get请求,获取不到cookies代码如下import requestsurl='http://www.dotamax.com/'r=requests.get(url=url)print (r.headers)print (r.request.headers)无论是请求头还是返回返回的头里面...
0
1
996
2017-04-18 10:16:36
2017-04-18 10:16:25
2017-04-18 10:16:22
2017-04-18 10:16:19
2017-04-18 10:16:16
python - flask部署中Nginx的问题
Nginx 的配置: {代码...} 地址栏输入ip, 访问成功! 问题是:把上面的server_name换成域名,其他不变,再访问就提示“If you see this page, the nginx web server is successfully installed and working. Furth...
0
2
686
2017-04-18 10:16:15
python关于多线程访问redis的问题
我想实现一个类似于scrapy-redis的功能。我采用多线程(threading)或者协程(gevent)来访问redis(使用redis.py)但是在访问过程中,我发现和scrapy-redis有个区别,scrapy-redis连接redis 的client数目永远是1...
0
1
718
2017-04-18 10:16:15