主要介绍了Python3实现抓取javascr ipt动态生成的html网页功能,结合实例形式分析了Python3使用selenium库针对javascr ipt动态生成的HTML网页元素进行抓取的相关操作技巧,需要的朋友可以参考下

本文实例讲述了Python3实现抓取javascr ipt动态生成的html网页功能。分享给大家供大家参考，具体如下： 用urllib等抓取网页，只能读取网页的静态源文件，而抓不到由javascr ipt生成的内容。 究其原因，是因为urllib是瞬时抓取，它不会等javascr ipt的加载延迟，所以页面中由javascr ipt生成的内容，urllib读取不到。 那由javascr ipt生成的内容就真的没有办法读取了吗？非也！ 这里要介绍一个python库：selenium，本文使用的版本