HBase在Linux上的利用及调优
HBase是Apache基金会的高性能、可伸缩的散布式存储系统,使用Hadoop文件系统作为数据存储介质,和支持MapReduce查询语句,基于Hadoop散布式计算框架而设计,是一种NoSQL数据库类型,性能和可靠性要好过传统的MySQL数据库。
Linux是一种基于UNIX的操作系统,是一种小型多用户操作系统,支持大量的软件和硬件装备,具有强大的性能和灵活的特点。就 HBase 在 Linux 上的利用而言,Linux 目前已成为 HBase 的最好运行环境,基于它运行 HBase 可以提高性能,提高安全性,简化操作等;并且在 Linux 上运行,能够针对 HBase 体系结构有效的调优,以到达更好的性能和更高的可用性。
具体说来,我们针对 HBase 集群在 Linux 的调优可以依照六大步骤进行:
1、调剂HBase有关的服务管理规则:通过调剂文件散布策略,设定RegionServer服务个数,和设置监控对HBase有关的服务及时启动和重启。
2、调剂Hadoop技术参数:Hadoop是HBase的基础,所以要调优HBase前也需要先调剂Hadoop的Netty框架协议,优化MapReduce的输入输前途径,并调剂HDFS的配置,让其有效利用集群的计算资源。
3、调剂硬件环境参数:优化硬件效能,如下降服务器之间的内存和网络带宽,调剂硬盘性能及网络装备等;
4、调剂HBase数据库配置:修改HBase分析表、增加多个地区服务器、调剂WAL日志大小等 /
5、调剂内存配置:调剂服务器内存,尽可能保证其有足够的内存用于 HBase 的数据缓存,提高数据查询、落地和存取的性能;
6、调剂HBase的Java虚拟机参数:调剂变量性能、调优GC搜集策略、调理线程池、调理堆大小等,让其能有效下降内存使用量和程序运行瓶颈。
由于HBase利用在Linux上可以得到很好的运行,所以采取 Linux 的 HBase 利用实际上也应当适当调剂来提升 HBase 的运行性能,和下降部署的复杂度和问题的复杂度。
文章来源:丸子建站
文章标题:HBase在Linux上的利用及调优
https://www.wanzijz.com/view/72519.html