温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

如何分析非关系型数据库HBSAE

发布时间:2022-01-18 10:48:33 来源:亿速云 阅读:133 作者:柒染 栏目:大数据

今天就跟大家聊聊有关如何分析非关系型数据库HBSAE,可能很多人都不太了解,为了让大家更加了解,小编给大家总结了以下内容,希望大家根据这篇文章可以有所收获。

Hbase 使用场景:有数十亿列,同时在很短时间内有数以千计的读写数据操作

每天写入量巨大,而相对读数量较小的应用,不需要复杂查询条件来查询数据的应用,HBase只支持基于rowkey的查询

读写流程:clinet-wal-memstore-Hfile

概念:Hmaster、RegionServer、Region、HFile

集群配置:CPU: 8~24核、电源: 恒定,散热好、内存:8~48G、磁盘:SATA驱动,(7200r/min)、网络(小集群1G/s ,大集群 10G/s)

容量规划:磁盘容量比存储实际容量多出25%~50%

估算公式:T =(S*R)*1.25(估算了临时文件)

S:存储量,R:副本数,T:集群所需空间

用NTP(网络时间协议)保证集群各节点准时

Hbase操作:

读 get get 't1','rowkey001', 'f1:col1'

写 put put 't1','rowkey001','f1:col1','value01'

扫描 scan scan 'tablename',{LIMIT =>2 } 获取前两行

删除 delete delete 't1','rowkey001','f1:col1'

Hbase可以作为hive外部表数据

权限控制:ACL

数据备份:

1、离线备份:distcp命令 hadoop distcp hdfs://jiqun1:9000/hbase hdfs://jiqun2:9000/hbasebackup/backup1

2、在线备份:Hbase快照--在线、离线两种方式

3、使用Export和Import 进行备份和恢复

java操作HBase

基本增删改查 HTable类,Hbase存储都是字节,Hbase单元格数据大小不能超过20M

过滤器功能-通过RegionServer进行过滤

Hbase内部提供了restful和thrift服务接口,通过命令可以开启。

其它Nosql数据库redis 支持事务,MongoDB不支持事务

看完上述内容,你们对如何分析非关系型数据库HBSAE有进一步的了解吗?如果还想了解更多知识或者相关内容,请关注亿速云行业资讯频道,感谢大家的支持。

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI