主要为大家详细介绍了Python定向爬虫校园论坛帖子信息的相关方法，具有一定的参考价值，感兴趣的小伙伴们可以参考一下

引言 写这个小爬虫主要是为了爬校园论坛上的实习信息，主要采用了Requests库 源码 URLs.py 主要功能是根据一个初始url（包含page页面参数）来获得page页面从当前页面数到pageNum的url列表 import re def getURLs(url, attr, pageNum=1): all_links = [] try: now_page_number = int(re.search(attr+'=(\d+)', url, re.S).group(1))