Header
Header

Blog Archives

scala之if条件控制与while和for循环语句

在Scala中,if表达式是有值的,就是if或者else中最后一行语句返回的值。阅读更多

Scala 模式匹配—— 神奇的match case

Scala 提供了强大的模式匹配机制,应用也非常广泛。一个模式匹配包含了一系列备选项,每个都开始于关键字 case。每个备选项都包含了一个模式及一到多个表达式。箭头符号 => 隔开了模式和表达式。阅读更多

spark使用saveAsNewAPIHadoopDataset将数据保存到Hbase

在spark实际使用过程,经常会遇到需要将运算结果数据写入保存到Hbase中,具体实现思路可以使用saveAsNewAPIHadoopDataset将数据保存到Hbase。阅读更多

spark 如何读取Hbase中存储的数据(scala代码实现)

spark可以在hbase中读取数据并转化为RDD,实现对Hbase中的数据进行计算。但需要注意的是一般生产环境中Hbase是基于zookeeper的高可用集群,因此在编写代码的时候需要保障spark能连接到zookeeper集群,然后借助zookeeper访问hbase。阅读更多