主要给大家介绍了关于利用scrapy将爬到的数据保存到mysql（防止重复）的相关资料，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面来一起看看吧。

前言 本文主要给大家介绍了关于scrapy爬到的数据保存到mysql（防止重复）的相关内容，分享出来供大家参考学习，下面话不多说了，来一起看看详细的介绍吧。 1.环境建立      1.使用xmapp安装php, mysql ,phpmyadmin      2.安装python3，pip      3.安装pymysql      3.(windows 略)我这边是mac，安装brew，用brew 安装scrapy 2.整个流程      1. 创建数据库和数据库表，准备保存