主要介绍了python协程gevent案例 爬取斗鱼图片过程解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下

分析 分析网站寻找需要的网址 用谷歌浏览器摁F12打开开发者工具，然后打开斗鱼颜值分类的页面，如图： 在里面的请求中，最后发现它是以ajax加载的数据，数据格式为json，如图： 圈住的部分是我们需要的数据，然后复制它的网址为https://www.douyu.com/gapi/rknc/directory/yzRec/1，出于学习目的只爬取第一页（减少服务器压力）。然后把网址放到浏览器中测试是否可以访问。如图： 结果正常。 分析json数据，提取图片链接 最后分析发现json中的dat