代码如下 from bs4 import BeautifulSoup #网页解析，获取数据 import sys #正则表达式，进行文字匹配 import re import urllib.request,urllib.error #指定url，获取网页数据 import xlwt #使用表格 import sqlite3 import lxml 以上是引用的库，引用库的方法很简单，直接上图： 上面第一步算有了，下面分模块来，步骤算第二步来： 这个放在开头 def main(): b

前言 要想学好爬虫，必须把基础打扎实，之前发布了两篇文章，分别是使用XPATH和requests爬取网页，今天的文章是学习Beautiful Soup并通过一个例子来实现如何使用Beautiful Soup爬取网页。 什么是Beautiful Soup Beautiful Soup是一款高效的Python网页解析分析工具，可以用于解析HTL和XML文件并从中提取数据。 Beautiful Soup输入文件的默认编码是Unicode，输出文件的编码是UTF-8。 Beautiful S