注册会员 | 设为首页 | 加入收藏夹
您好，欢迎光临本网站！[请登录] ！[注册会员]！  

搜索资源列表

  1. spark本地开发模式配置

  2. 在自己的机器上配置spark的本地开发模式，可以用来测试spark代码是否正确，如果没问题，可以提交到spark集群上去运行，免去每次都要打包放到集群上去测试的麻烦。因为在网络上没找到合适的资源可以快速构建，所以就自己鼓捣了下，分享出来让有同样需求的同学参考下。 1.下载和安装jdk和scala，这个不用多说了，我安装的jdk版本是jdk 1.7，scala版本2.10.4 2.下载hadoop的安装包，我下载的是hadoop-2.6版本的，配置HADOOP_HOME 和配置JAVA_HOME

  3. 所属分类：其它

    • 发布日期：2015-11-24
    • 文件大小：9437184
    • 提供者：xingfulangren

  1. spark从入门到实战

  2. 第1章：SCALA编程（一） 1.大数据分析框架概要、Spark课程学习计划及建议 2.为什么学习SCALA语言及SCALA语言介绍和学习提纲 3.SCALA环境搭建及IDEA安装配置（JAVA安装、SCALA安装及IDEA安装）） 4.SCALA语言HelloWorld及安装总结（作业LINUX系统安装） 5.SCALA中变量的声明（两种方式） 6.SCALA中数据类型及操作符 7.IF语句及WHILE循环、循环表达式及FOR基本使用 8.FOR循环深入讲解及yield功能 9.SCALA中

  3. 所属分类：spark

    • 发布日期：2018-09-18
    • 文件大小：64
    • 提供者：ld_oyy

  1. IDEA中scala环境搭建

  2. 两步： 前提：scala是基于java的，所以电脑上需安装好了JDK，使用java -version进行验证 1.下载scala SDK：https://www.scala-lang.org/download/ 2.IDEA中选中File=>setting=>plugin，搜索下载scala插件，重启IDEA,创建新项目，左侧出现scala选项，配置好scala SDK即可 注意：新建scala文件，默认是class选项，下拉菜单修改为object选项，否则运行不了。 class

  3. 所属分类：其它

    • 发布日期：2021-01-07
    • 文件大小：32768
    • 提供者：weixin_38502292

  1. Spark：用Scala和Java实现WordCount

  2. 为了在IDEA中编写scala，今天安装配置学习了IDEA集成开发环境。IDEA确实很优秀，学会之后，用起来很顺手。关于如何搭建scala和IDEA开发环境，请看文末的参考资料。用Scala和Java实现WordCount，其中Java实现的JavaWordCount是spark自带的例子（$SPARK_HOME/examples/src/main/java/org/apache/spark/examples/JavaWordCount.java）OS:RedHatEnterpriseLinux

  3. 所属分类：其它

    • 发布日期：2021-03-03
    • 文件大小：244736
    • 提供者：weixin_38641876

  1. Spark入门实战系列（下）--实时流计算SparkStreaming实战

  2. 本文来自博客园，由火龙果软件Anna编辑、推荐。1.1.1流数据说明在实例演示中模拟实际情况，需要源源不断地接入流数据，为了在演示过程中更接近真实环境将定义流数据模拟器。该模拟器主要功能：通过Socket方式监听指定的端口号，当外部程序通过该端口连接并请求数据时，模拟器将定时将指定的文件数据随机获取发送给外部程序。1.1.2模拟器代码 1.1.3生成打包文件【注】可以参见第3课《Spark编程模型（下）--IDEA搭建及实战》进行打包在打包配置界面中，需要在ClassPath加入：/app/sc

  3. 所属分类：其它

    • 发布日期：2021-02-24
    • 文件大小：1048576
    • 提供者：weixin_38674115

  1. Spark：用Scala和Java实现WordCount

  2. 为了在IDEA中编写scala，今天安装配置学习了IDEA集成开发环境。IDEA确实很优秀，学会之后，用起来很顺手。关于如何搭建scala和IDEA开发环境，请看文末的参考资料。用Scala和Java实现WordCount，其中Java实现的JavaWordCount是spark自带的例子（$SPARK_HOME/examples/src/main/java/org/apache/spark/examples/JavaWordCount.java）OS:RedHatEnterpriseLinux

  3. 所属分类：其它

    • 发布日期：2021-01-30
    • 文件大小：217088
    • 提供者：weixin_38685831