本软件是用来抓取我买网上分类商品的,支持ECSHOP2.7.2---2.7.3的数据库商品结构, 在最后的环节,更新了goods,goods_attr,brand,goods_gallery,goods_cat等数据表 建立临时存储的一个数据表 CREATE TABLE ctb_womaiproducts (id int(1) not null auto_increment, proname varchar (200) not null,prourl varchar (200) not nul
这里用到一个HTML解析辅助类:HtmlAgilityPack,如果没有网上找一个增加到库里,这个插件有很多版本,如果你开发环境是使用VS2005就2.0的类库,VS2010就使用4.0,以此类推……….然后直接创建一个控制台应用,将我下面的代码COPY替换就可以运行,下面就来讲讲我两年前做爬虫经历,当时是给一家公司做,也是用的C#,不过当时遇到一个头痛的问题就是抓的图片有病毒,然后系统挂了几次。所以抓网站图片要注意安全,虽然我这里没涉及到图片,但是还是提醒下看文章的朋友。
class P