您好,欢迎光临本网站![请登录][注册会员]  

搜索资源列表

  1. 集群flume实战

  2. Flume集群测试 假设:现有两台机子,命名为:agent,collect。 agent IP地址为:192.168.26.65 collect为192.168.26.61 要求:实现agent到collect的连接,并能向collect发送日志。 步骤: 两台电脑上分别装上 jdk,flume-ng(不是flume-og),配置好profile。
  3. 所属分类:讲义

    • 发布日期:2016-11-02
    • 文件大小:17408
    • 提供者:hl541867329
  1. 实战Flume基础

  2. 实战flume基础,带你入门,分布式、高可靠的和高可用的日志采集系统,用 来从不同来源的系统中采集、汇总和搬移大容量的日志数据到一个集中式的数据存储中
  3. 所属分类:kafka

    • 发布日期:2018-05-13
    • 文件大小:618496
    • 提供者:znarey
  1. 基于Hadoop离线大数据分析平台项目实战

  2. 课程简介: 某购物电商网站数据分析平台,分为收集数据、数据分析和数据展示三大层面。其中数据分析主要依据大数据Hadoop生态系统常用组件进行处理,此项目真实的展现了大数据在企业中实际应用。 课程内容 (1)文件收集框架 Flume ①Flume 设计架构、原理(三大组件) ②Flume 初步使用,实时采集数据 ③实际案例:使用Flume监控数据,实时收集存储HDFS中 (2)大数据分析平台架构 ①数据平台三大模块 让技术产生价值! ②分析平台业务数据 ③大数据平台技术选型和搭建配置测试 (3)
  3. 所属分类:Hadoop

    • 发布日期:2018-07-03
    • 文件大小:889
    • 提供者:kaipuledou
  1. 尚硅谷 电信客服大数据项目实战视频(第一天)

  2. 综合性比较强的一个项目,5天的视频,课堂实录,视频清晰无杂音。主要是用Java语言实现的,用到的技术很多,Flume,Kafka,zookeeper,hdfs,yarn,mapreduce,mysql,数据可视化(SSM),Android手机端,echart等,含金量还是很高的!先分享第一天的。
  3. 所属分类:Java

    • 发布日期:2018-08-30
    • 文件大小:75776
    • 提供者:gooapple
  1. Flume最佳实践手册

  2. Flume最佳实践手册,总结自自己的实战开发,分享给大家共通交流。
  3. 所属分类:spark

    • 发布日期:2018-09-10
    • 文件大小:601088
    • 提供者:zhangaocommit
  1. Hadoop大数据零基础实战培训教程

  2. HBase 案例分析 MapReduce 高阶实现 MapReduce 多语言编程 Chukwa 集群监控系统 Greenplum 架构 Flume 日志收集系统 视频教程 应有尽有
  3. 所属分类:Hadoop

    • 发布日期:2019-02-02
    • 文件大小:224
    • 提供者:qq_41820707
  1. 小牛学堂大数据全套视频+实战

  2. 01:JavaSE基础 02:SpringMVC Mybatis 汽配城 03:Linux基础进阶(开发人员必备) 04:Hadoop Hive Hbase Flume Sqoop 05:ElasticSearch 06:Spark安装部署到高级 07:Scala基础到高级 08:共享单车项目 09:实训实战 10:Ambari+HDP搭建
  3. 所属分类:Hadoop

    • 发布日期:2019-04-17
    • 文件大小:97
    • 提供者:panpan2017
  1. 08_尚硅谷大数据技术之Flume.docx

  2. 本教程特点: 1.更适合零基础学员: ·自Java语言起源始,循序渐进,知识点剖析细致且每章配备大量随堂练习,让你步步为营,学得透彻、练得明白 ·拒绝晦涩难懂的呆板教学,宋老师语言生动幽默,举例形象生动深入浅出,迅速让你把握问题本质,四两拨千斤 2.课程内容推陈出新: ·基于JDK 11,将Java8、Java9、Java10、Java11新特性一网打尽 ·课程中,Eclipse和IDEA这两种企业一线开发环境都使用到了 3.技术讲解更深入、更全面: ·课程共30天,715个知识视频小节,涉及
  3. 所属分类:Java

    • 发布日期:2019-07-09
    • 文件大小:12582912
    • 提供者:mobaiyuhai
  1. 尚gg大数据项目实战电商数仓系统开发教程.txt

  2. 01_数仓项目介绍.avi4 b4 Q* Q8 Z0 Y) C6 O! w 02_数仓采集_用户行为采集课程介绍.avi8 \7 f3 O. c- {: v# W& V$ Y& b 03_数仓采集_数仓的概念.avi8 Z# X* q/ c; }3 A* [ T 04_数仓采集_项目需求.avi6 B8 n s0 h! M4 X# j! |0 ` 05_数仓采集_项目技术选型.avi8 [% N% W, U# y5 s 06_数仓采集_系统数据流程设计.avi8 N: L Y6 D6 y 07
  3. 所属分类:Hive

  1. Sprak+Hadoop+Kafka+flume+Zookeeper+Hive+Session+Mysql.rar

  2. Sprak+Hadoop+Kafka+flume+Zookeeper+Hive+Session+Mysql实战大型离线电商用户数据分析平台
  3. 所属分类:Java

    • 发布日期:2019-09-06
    • 文件大小:118
    • 提供者:lyf_ldh
  1. hadoop大数据零基础实战培训教程.rar

  2. HBase 案例分析 MapReduce 高阶实现 MapReduce 多语言编程 Chukwa 集群监控系统 Greenplum 架构 Flume 日志收集系统 视频教程 应有尽有
  3. 所属分类:Java

    • 发布日期:2019-10-17
    • 文件大小:198
    • 提供者:u011751766
  1. Flume.xmind

  2. 以下为主要主题:Flume基本概念、Flume事件概念与原理、Flume安装配置、Flume配置文件、Flume实战;此资源参考《大数据技术原理与应用》、《从零开始学大数据分析》、湖南科技职业学院人工智能大数据教研组《分布式系统hadoop》适合初学者。
  3. 所属分类:Hadoop

    • 发布日期:2020-07-18
    • 文件大小:6291456
    • 提供者:m0_46209092
  1. spark streaming实时网站分析项目实战.rar

  2. 操作步骤: 一.数据采集:视频网站访问日志(编辑python脚本) 1.Python日志产生器开发URL ,ip信息,状态码,时间等 2.python日志产生器测试并将日志写入到文件中 3.通过定时调度工具每一分钟产生一批数据 4.使用flume实时收集日志信息 5.对接实时数据到kafka并输出到控制台 6.spark streaming对接kafka的数据进行消费 数据采集详情:项目其他\数据采集.docx 二.数据清洗:见项目 使用spark streaming完成数据清洗操作 三
  3. 所属分类:Linux

    • 发布日期:2020-08-18
    • 文件大小:357376
    • 提供者:weixin_44222986
  1. 开源企业级大数据开发经典实战项目新闻实时日志分析系统(视频+完整代码+文档免费下载)

  2. 本课程基于企业大数据经典案例项目(大数据日志分析),全方位、全流程讲解 大数据项目的业务分析、技术选型、架构设计、集群规划、安装部署、整合继承与开发和web可视化交互设计。 不管是零基础的大数据技术爱好者,还是有基础的IT小白,都可以通过此课程快速的上升到一个新的高度。 涉及技术: Hadoop2.x、spark,Zookeeper、Flume、Hive、Hbase、Kafka、Spark2.x、MySQL、Hue、J2EE、websoket、Echarts
  3. 所属分类:互联网

  1. SparkStreaming学习札记4-2020-2-15–SparkStreaming实时流处理项目实战

  2. 12-8 -通过定时调度工具每一分钟产生一批数据 1.在线工具 https://tool.lu/crontab/ crontab -e               */1 * * * * /hadoop/data/project/log_generator.sh 如果要取消用#注释掉 2.对接python日志产生器输出的日志到Flume 定义名字为streaming_project.conf 选型:access.log ==>控制台输出            exec          
  3. 所属分类:其它

    • 发布日期:2021-01-07
    • 文件大小:32768
    • 提供者:weixin_38733733
  1. Recommender-For-Bigdata-Exercise:大数据实战-商品推荐系统(Spark,Scala,MongoDB)-源码

  2. 大数据练习推荐 大数据实战-商品推荐系统(Spark,Scala,MongoDB,Kafka,Flume,Redis)
  3. 所属分类:其它

    • 发布日期:2021-03-11
    • 文件大小:7340032
    • 提供者:weixin_42170064
  1. 高可用Hadoop平台-FlumeNG实战图解篇

  2. 今天补充一篇关于Flume的博客,前面在讲解高可用的Hadoop平台的时候遗漏了这篇,本篇博客为大家讲述以下内容:下面开始今天的博客介绍。FlumeNG是一个分布式,高可用,可靠的系统,它能将不同的海量数据收集,移动并存储到一个数据存储系统中。轻量,配置简单,适用于各种日志收集,并支持Failover和负载均衡。并且它拥有非常丰富的组件。FlumeNG采用的是三层架构:Agent层,Collector层和Store层,每一层均可水平拓展。其中Agent包含Source,Channel和Sink,
  3. 所属分类:其它

    • 发布日期:2021-02-25
    • 文件大小:2097152
    • 提供者:weixin_38695773
  1. Spark入门实战系列(上)-实时流计算SparkStreaming原理介绍

  2. SparkStreaming是Spark核心API的一个扩展,可以实现高吞吐量的、具备容错机制的实时流数据的处理。支持从多种数据源获取数据,包括Kafk、Flume、Twitter、ZeroMQ、Kinesis以及TCPsockets,从数据源获取数据之后,可以使用诸如map、reduce、join和window等高级函数进行复杂算法的处理。最后还可以将处理结果存储到文件系统,数据库和现场仪表盘。在“OneStackrulethemall”的基础上,还可以使用Spark的其他子框架,如集群学习、
  3. 所属分类:其它

    • 发布日期:2021-02-24
    • 文件大小:539648
    • 提供者:weixin_38565818
  1. SparkStreaming:Spark Streaming + Flume + Kafka + HBase + Hadoop + Zookeeper实现实时日志分析统计; SpringBoot + Echarts实现数据可视化展示-源码

  2. 避免流式传输 前言:使用scala和java混编完成,其中也涉及到python脚本来自动生成日志,linux crontab调度工具来定时执行脚本生成实时日志。生成的数据主要是模拟某学习网站学习视频课程的访问量(其中*以“ / class”开头的表示实战课程,然后通过流水线Flume + Kafka + SparkStreaming进行实时日志的收集,HBase来存储数据)* 注意事项(使用的软件工具及环境配置) hadoop-2.6.0-cdh5.7.0 hbase-1.2.0-cdh5.
  3. 所属分类:其它

    • 发布日期:2021-02-05
    • 文件大小:943104
    • 提供者:weixin_42143806
  1. Spark入门实战系列(上)-实时流计算SparkStreaming原理介绍

  2. SparkStreaming是Spark核心API的一个扩展,可以实现高吞吐量的、具备容错机制的实时流数据的处理。支持从多种数据源获取数据,包括Kafk、Flume、Twitter、ZeroMQ、Kinesis 以及TCPsockets,从数据源获取数据之后,可以使用诸如map、reduce、join和window等高级函数进行复杂算法的处理。最后还可以将处理结果存储到文件系统,数据库和现场仪表盘。在“One
  3. 所属分类:其它

    • 发布日期:2021-01-27
    • 文件大小:539648
    • 提供者:weixin_38697753
« 12 »