基于之前两篇的基础知识后 python爬虫学习笔记（一）——初识爬虫 python爬虫学习笔记（二）——解析内容 开始实战爬取豆瓣TOP250电影 首先还是重新复习下爬虫的基本流程： 发起请求 获取响应内容 解析内容 保存数据 1. 发起请求 首先观察豆瓣电影Top250首页 (\s+)?’, ” “, bd) bd = re.sub(‘/’, ” “, bd) data.append(bd.strip())

– 获取到网页数据后，我们发现我们想要的信息隐藏在一堆无用信息之中，此时便需要解析网页数据的内容 补充：在一些其他的教程中，发现也可以用urllib模块获取数据，urllib模块是python内置的一个http请求库，不需要额外的安装。只需要关注请求的链接，参数，提供了强大的解析。requests库则需格外安装，但是个人感觉requests使用更简洁方便 标签解析 Beautiful Soup库的安装（Beautiful Soup库是解析、遍历、维护“标签树”的功能库）： 按WIN键+R键打开运