spark2.1.0之配置与源码分析
版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/beliefer/article/details/80468207
任何优秀的软件或服务都会提供一些配置参数,这些配置参数有些是内置的,有些则是可以由用户配置的。
大数据Scala系列之文件以及正则表达式
大数据Scala系列之文件以及正则表达式1 读取行导入scala.io.Source后,即可引用Source中的方法读取文件信息。
import scala.io.Sourceobject FileDemo extends App{ val source = Source.
Windows 上安装 Scala
在安装 Scala 之前需要先安装 Java 环境,具体安装的详细方法就不在这里描述了。
您可以自行搜索我们网站中的内容获得其他网站的帮助来获得如何安装 Java 环境的方法。
接下来,我们可以从 Scala 官网地址 https://www.scala-lang.org/download/ 下载 Scala 二进制包,本教程我们将下载 2.12.8 版本,如下图所示:
你可以下载 msi 文件,然后双击进行安装。
[Flink]Flink1.3 Stream指南六 事件时间与处理时间
Flink在数据流中支持几种不同概念的时间。
1. 处理时间 Processing Time
Processing Time(处理时间)是指执行相应操作机器的系统时间(Processing time refers to the system time of the machine that is executing the respective operation.)。
kafka简单安装部署
一、安装、配置
1.下载
kafka是由linkedin开源的,但是已经托管在了apache,所以需要从apache下载,http://kafka.apache.org/downloads.html。