开发工具:
文件大小: 16kb
下载次数: 0
上传时间: 2021-03-16
详细说明：产品检索器中的Amazon（dot）
一个演示实用程序脚本，它针对给定的搜索查询对Amazon进行爬网并转储结果。 不能用于生产。 请参阅警告。
用法
# git clone
yarn install
# or "npm install"
node index.js
请按照提示输入参数：
搜索查询以查询Amazon（例如“电话”或“游戏鼠标”）
要刮的页数
输出格式（json或xml）
代码结构
有关详细信息，请参见index.js注释。 概括：
接受用户输入
使用async.js为每个页面启动一个任务，以充分利用事件循环
使用cheerio为每个页面解析标记
将结果转储到每个页面的输出文件中
注意事项
对于数百页的搜索查询，亚马逊可能有成千上万的结果。 脚本几乎同时对每个页面发出请求。 亚马逊将在某个时候触发验证码或IP超时。 未经测试，请限制页数。 解决方案：代理/ ip旋转
(系统自动生成,下载前可以参看下载内容)
下载文件列表
相关说明
- 本站资源为会员上传分享交流与学习,如有侵犯您的权益,请联系我们删除.
- 本站是交换下载平台，提供交流渠道，下载内容来自于网络，除下载问题外，其它问题请自行百度。
- 本站已设置防盗链，请勿用迅雷、QQ旋风等多线程下载软件下载资源，下载后用WinRAR最新版进行解压.
- 如果您发现内容无法下载，请稍后再次尝试；或者到消费记录里找到下载记录反馈给我们.
- 下载后发现下载的内容跟说明不相乎，请到消费记录里找到下载记录反馈给我们，经确认后退回积分.
- 如下载前有疑问，可以通过点击"提供者"的名字，查看对方的联系方式，联系对方咨询.
