这篇文章主要介绍怎么合理设置Navigator Metadata Server的Heap,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!
1.文档编写目的
在Cloudera Manager管理中部署了Navigator服务后,随着集群数据量的增加Navigator Metadata处理的元数据量会相应的增加,这时会遇到Navigator Metadata服务反复崩溃或启动失败。
2.Navigator Metadata Heap推算
推算Navigator Metadata服务的Heap大小,主要依赖该服务的log,在log中检索关键的日志信息计算Heap的大小。
1.当Navigator Metadata Server启动时,会记录其内部Solr索引中包含的文档数,登录Navigator Metadata Server服务所在服务器,进入其日志目录检索日志文件
2.在日志文件中检索如下信息nav_elements和nav_elements,如下脚本为获取到最新的文档数
grep 'nav_elements' mgmt-cmf-mgmt-NAVIGATORMETASERVER-cdh02.fayson.com.log.out |awk ' ''{print $1" "$7" "$12}'|sort -r|grep -m 10 'nav_elements'
(可左右滑动)
grep 'nav_relations' mgmt-cmf-mgmt-NAVIGATORMETASERVER-cdh02.fayson.com.log.out |awk ' ''{print $1" "$7" "$12}'|sort -r|grep -m 10 'nav_relations'
(可左右滑动)
3.在上一步获取到nav_elements和nav_elements的文档数(选择最大的一条数据),根据如下计算公式推算出合理的Heap大小,计算公式如下:
((nav_elements+nav_elements)* 200 bytes) + 2GB
通过该公式推算出Navigator Metadata Server的Heap大小约为:
(12633+12652) * 200 + 2 * 1024 * 1024 = 7154152 bytes 约为6~7GB
4.登录CM修改Navigator Metadata Server的Java Heap大小
保存配置并重启Navigator Metadata Server服务。
以上是“怎么合理设置Navigator Metadata Server的Heap”这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注亿速云行业资讯频道!
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。