您好,欢迎光临本网站![请登录][注册会员]  

搜索资源列表

  1. 结合网络爬虫开发的完整视频网站

  2. SpringBoot框架,自动网络爬虫,结合网络爬虫开发的完整视频网站
  3. 所属分类:Java

    • 发布日期:2017-10-16
    • 文件大小:2097152
    • 提供者:wznhlcp
  1. SeimiCrawler文档离线版

  2. •SeimiCrawler一个敏捷强大的Java爬虫框架 •1.简介 •2.需要 •3.快速开始 ◦3.1.maven依赖 ◦3.2.在SpringBoot中 ◦3.3.常规用法 •4.原理 ◦4.1.基本原理 ◦4.2.集群原理 •5.如何开发 ◦5.1.约定 ◦5.2.第一个爬虫规则类-crawler ◾5.2.1.注解Crawler ◾5.2.2.实现startUrls() ◾5.2.3.实现start(Response response) ◾5.2.4.Response数据提取 ◾5.
  3. 所属分类:Java

    • 发布日期:2018-09-18
    • 文件大小:60416
    • 提供者:qq_16549935
  1. 爬虫基于Springboot+WebMagic+Mybatis+多数据源

  2. 闲来无事最近写了一个全新的爬虫框架WebMagic整合springboot的爬虫程序,不清楚WebMagic的童鞋可以先查看官网了解什么是Webmagic,顺便说说用springboot时遇到的一些坑
  3. 所属分类:Java

    • 发布日期:2018-11-30
    • 文件大小:67108864
    • 提供者:smile_miracle
  1. java天气相关爬虫

  2. springboot框架的java天气相关爬虫代码 java,java,java
  3. 所属分类:Java

    • 发布日期:2019-02-01
    • 文件大小:680960
    • 提供者:qq_32020035
  1. 黑马57期黑马最新资源来咯

  2. 黑马57期 视频 下载 黑马57期.jpg 资料目录: 黑马57期 |____27 |____软件测试相搭配的测试工具 |____软件测试教程讲义 |____9.QC管理学习(类禅道)学习 |____8.性能测试LoadRunner |____7.接口视频Jmeter |____6.移动端项目测试视频appium |____5.web自动化测试视频selenium |____4.编程数据结构python6学习教程 |____3.深入了解软件测试基础视频 |____2.Linux和数据库SQL
  3. 所属分类:Java

    • 发布日期:2019-04-28
    • 文件大小:116
    • 提供者:qq_32718315
  1. 基于Springboot的网络爬虫-京东商品页

  2. 这是基于Springboot的网络爬虫-京东商品页的源码,可供大家免费下载 Spring Boot是由Pivotal团队提供的全新框架,其设计目的是用来简化新Spring应用的初始搭建以及开发过程。该框架使用了特定的方式来进行配置,从而使开发人员不再需要定义样板化的配置。通过这种方式,Spring Boot致力于在蓬勃发展的快速应用开发领域(rapid application development)成为领导者。
  3. 所属分类:Java

    • 发布日期:2020-04-05
    • 文件大小:24576
    • 提供者:qq_43688587
  1. ES的搜索引擎的设计与实现源码.zip

  2. 本系统以SpringBoot基础框架整合其他技术设计和搭建而成,选用webmagic框架实现单节点的网络爬虫系统,爬虫的生命周期为链接提取、页面下载、内容抽取、持久化,多线程抓取机制,Redis队列和集合实现网页去重和增量抓取,Redis队列和集合实现网页去重和增量抓取。搜索引擎的索引和搜索系统是利用全文搜索引擎框架(ElasticSearch)构建,由IK分词器实现语句分词地功能,ElasticSearch是一个企业分布式、高扩展、高实时的搜索与数据技术分析处理引擎,可以用于搜索各种文当,它提
  3. 所属分类:Java

    • 发布日期:2020-08-04
    • 文件大小:251904
    • 提供者:qirui97
  1. springBoot+webMagic实现网站爬虫的实例代码

  2. 主要介绍了springBoot+webMagic实现网站爬虫的实例代码,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
  3. 所属分类:其它

    • 发布日期:2020-08-19
    • 文件大小:83968
    • 提供者:weixin_38733245
  1. spider:利用spring boot + webmagic开发的java爬虫系统-源码

  2. 蜘蛛 一。简介 通过spring boot建造的爬虫系统 二。技术选型 spring boot:构建项目框架,比较Swift,集成嵌入式tomcat,部署运行方便,零配置代码简洁 elasticSearch:作为nosql数据存储引擎 elastic-job:分布式作业调度系统,依赖zookeeper环境作为分布式协同 WebMagic:爬虫框架,有去重功能,支持Xpath,regex,css等选择器 三。运行方式 先启动zookeeper和elasticsearch ,并修改相应配置,然后按下
  3. 所属分类:其它

    • 发布日期:2021-03-11
    • 文件大小:283648
    • 提供者:weixin_42166918
  1. SeimiCrawler:一个简单,敏捷,分布式的支持SpringBoot的Java爬虫框架;一种敏捷的分布式爬虫框架-源码

  2. SeimiCrawler 一个敏捷,强大,独立的分布式爬虫框架。支持spring boot和redisson。 SeimiCrawler的目标是成为Java里最实用的爬虫框架,大家一起加油。 简介 SeimiCrawler是一个敏捷的,独立部署的,支持分布式的Java爬虫框架,希望能在最大程度上减少新手开发一个替代高且性能不差的爬虫系统的门生物学,以及提高开发爬虫系统的开发效率。在设计思想上SeimiCrawler受Python的爬虫框架Scrapy启发,同时融合了Java语言本身特点与Sp
  3. 所属分类:其它

    • 发布日期:2021-02-25
    • 文件大小:138240
    • 提供者:weixin_42137028
  1. WebMaple:以webmagic为内核的分布式可视化爬虫框架,参考webmagic-avalon的架构,目标是提供可分散分布的爬虫框架,以及可视化的爬虫管理界面-源码

  2. Web枫 以webmagic为内核的分布式可视化爬虫框架,参考webmagic-avalon的架构,目标是提供可分散部署的爬虫框架,以及可视化的爬虫管理界面。 目前分为三个模块: maple-admin,为webmagic-avalon中的管理员中断,对应一个java进程。负责: 与多个worker通信,监听worker的幸存; 从工人处获得当前爬虫信息,并在前端页面展示; 调用worker的接口创建爬虫。 它是一个Springboot项目,可以直接打包上传到服务器并启动。 maple-wo
  3. 所属分类:其它

    • 发布日期:2021-02-07
    • 文件大小:16777216
    • 提供者:weixin_42116847
  1. NewsApp:简单的新闻WebAPP,前端:MUI框架,布局:Spring Boot + Spring data JPA,展示新闻数据通过从相应网站爬取用做测试-源码

  2. 简介: 拟开发出一个Web APP,采用前分离分离的思想,替代只提供接口,前端通过Ajax的方式请求相应的功能。本项目的主要内容是开发一个新闻客户端APP,具有通用新闻客户端APP的常用功能。数据,并进行展现,新闻数据通过爬虫从相应网站爬取用做测试。 前端:国产的MUI框架前端:Spring Boot + Spring data JPA 运行 项目分2部分,一个web端,一个服务器端。 1.将服务器端的代码导入IDEA,在属性文件中配置好数据库信息。通过使用Spring数据JPA,创建好数据库
  3. 所属分类:其它

    • 发布日期:2021-02-06
    • 文件大小:29360128
    • 提供者:weixin_42100971
  1. SNS-论坛-网站:牛客网高级项目(SNS +社区问答类网站)-源码

  2. 低仿知乎类SNS +社区问答网站() Springboot + Mybatis + Thymeleaf开发,数据库使用Mysql + redis,异步框架处理消息推送,同时使用了Pyspider爬虫进行网站内容数据填充。 功能 用户注册登录管理 登陆界面: 导航栏(登陆前): 导航栏(登陆后): 个人信息导航: 问题管理 问题发布: 敏感词过滤(内容已被过滤): 问题广场(首页显示): 评论中心与站内信 评论页面: 个人站内信: 站内信详情: Redis实现赞踩功能 评论的赞踩: 初步设计 初
  3. 所属分类:其它

    • 发布日期:2021-02-04
    • 文件大小:2097152
    • 提供者:weixin_42114645
  1. UUIA-Java-SDK:UUIA(统一大学信息聚合框架)的子版本快速开发工具套件(Java版本)。UUIA(统一大学信息聚合框架)快速入门SDK,用于Java中的子节点-源码

  2. UUIA Java SDK Java中的UUIA SDK,一个向校园开发者提供快速调整的UUIA框架并连接到葫芦校园信息平台的校园信息聚合服务子节点服务端。 开发者仅需实现对应校园的特定服务数据的获取逻辑即可,无论其数据来源是官方授权接口还是自动爬虫。 此为SDK的服务器基础基于SpringBoot框架。 参考快速接收步骤 下载/克隆此项目。 导入根目录maven项目。 配置您在UUIA开放平台生成和获取的子例程secret和App Key。 根据存储库中包含TODO标记的类的指示,补全数据获
  3. 所属分类:其它

    • 发布日期:2021-02-04
    • 文件大小:76800
    • 提供者:weixin_42140710
  1. spring-boot-quick:基于springboot的快速学习示例,整合自己遇到的开源框架,例如:rabbitmq(连续时间),Kafka,jpa,redies,oauth2,swagger,jsp,docker,spring-ba

  2. 欢迎大家留言和PR〜 提示:技术更新换代太快,本仓库仅做参考,自己的项目具体使用哪个版本还需谨慎思考〜(不推荐使用最新的版本,推荐使用(最新-1 | 2)的版本,会比较稳定) 快速启动 前言 自己很早就想搞一个总的仓库就是将自己平时遇到的和学习到的东西整合在一起,方便后面用的时候快速的查找与使用,之前是通过branch的方式去整理,感觉不直观,一咬牙就花了点时间将所有的分支整合在一起(之前使用branch方式的兄dei,这里对不住了,你们可以将之前之前的干掉,重新克隆总的),方便自己也方便大家
  3. 所属分类:其它

    • 发布日期:2021-01-30
    • 文件大小:2097152
    • 提供者:weixin_42126865