文章目录1：爬虫的流程介绍2：Request的基本使用1. request()方法的参数说明2. Response对象的属性和方法3.request的请求头详解4.post请求与json对象的接受5.在header中设置cookie5.在header中设置session 1：爬虫的流程介绍 确认需求：你需要什么东西？你需要美女的图片 寻找需求：哪里能找到你想要的东西？百度图库 发送请求：发送访问页面的请求，获取页面的源代码。 解析数据：从冗杂的源代码当中提取我们需要的信息。 2：Request

文章目录一、XPath1.常用规则与安装2.XPath节点3.使用实例4.实战：爬取自己博客的所有标题，阅读量二、bs4的安装与三种使用方式1.通过标签访问各级元素2.通过搜索获取页面元素3.css选择器 一、XPath XPath 全称 XML Path Language，即 XML 路径语言，它是一门 XML 文档中查找信息的语言。它最初是用来搜寻 XML 文档的，但是它同样适用于 HTML 文档的搜索。 w3c官方教程 1.常用规则与安装 XPath常用规则 看完这个系列所有爬虫