• Posts tagged "spark hbase"
Header
Header

Blog Archives

spark使用saveAsNewAPIHadoopDataset将数据保存到Hbase

在spark实际使用过程,经常会遇到需要将运算结果数据写入保存到Hbase中,具体实现思路可以使用saveAsNewAPIHadoopDataset将数据保存到Hbase。阅读更多

spark 如何读取Hbase中存储的数据(scala代码实现)

spark可以在hbase中读取数据并转化为RDD,实现对Hbase中的数据进行计算。但需要注意的是一般生产环境中Hbase是基于zookeeper的高可用集群,因此在编写代码的时候需要保障spark能连接到zookeeper集群,然后借助zookeeper访问hbase。阅读更多