文件名称:
数据处理管道：使用Docker，Spark，Kafka和Cassandra进行实时数据处理管道和可视化-源码
开发工具:
文件大小: 533kb
下载次数: 0
上传时间: 2021-02-06
详细说明：数据处理管道
描述
只需5个步骤，即可使用Docker Machine和Compose，Kafka，Cassandra和Spark构建功能强大的实时数据处理管道和可视化解决方案。
参见下面的项目架构：
到底发生了什么事？
我们连接到twitter流API（ ），并开始基于关键字列表侦听事件，这些事件直接转发到Kafka（不解析）。 在中间，有一个spark作业，收集这些事件，将它们转换为Spark SQL上下文（ ），该上下文过滤kafka消息并仅提取感兴趣的字段，在这种情况下为： user.location，文本和user.profile_image_url ，一旦有了，我们就会使用
(系统自动生成,下载前可以参看下载内容)
下载文件列表
相关说明
- 本站资源为会员上传分享交流与学习,如有侵犯您的权益,请联系我们删除.
- 本站是交换下载平台，提供交流渠道，下载内容来自于网络，除下载问题外，其它问题请自行百度。
- 本站已设置防盗链，请勿用迅雷、QQ旋风等多线程下载软件下载资源，下载后用WinRAR最新版进行解压.
- 如果您发现内容无法下载，请稍后再次尝试；或者到消费记录里找到下载记录反馈给我们.
- 下载后发现下载的内容跟说明不相乎，请到消费记录里找到下载记录反馈给我们，经确认后退回积分.
- 如下载前有疑问，可以通过点击"提供者"的名字，查看对方的联系方式，联系对方咨询.
