分类：Structured Streaming
Spark Structured Streaming： output Mode 输出模式（append，update，complete）
complete，把所有的DataFrame的内容输出，这种模式只能在做agg聚合操作的时候使用，比如ds.group.count，之后可以使用它 append，普通的dataframe在做完map或者filter之后可…
大数据常见端口汇总-hadoop、hbase、hive、spark、kafka、zookeeper等
常见端口汇总： Hadoop： 50070：HDFS WEB UI端口 9870：3.x HDFS WEB UI端口 8020 ： 高可用的HDFS RPC端口 9000 ： 非高可用的H…
Spark 知识点总结
什么是Spark 基于内存的，用于大规模数据处理（离线计算、实时计算、快速查询（交互式查询））的统一分析引擎。 Spark特点 快： Spark计算速度是MapReduce计算速度的10-100倍 易用：（算法多） MR…
Spark Structured Streaming从kafka读数据 并进行wordcount 更新写入mysql
def main(args: Array[String]): Unit = { val sparkSession: SparkSession = SparkSession.builder().master("local[…
