分布式ganglia自定义扩展监控及集群环境下的实施

作者: 云计算机网 分类: 云计算知识 发布时间: 2016-11-22 02:58

今天和朋友聊起ganglia来,他想做性能分析,一开始选择是zabbix了,后来改成ganglia了,我的回答是 ganglia更适合做这些东西。 好多朋友不会ganglia,甚至没有接触过ganglia,这样我就先简单介绍下ganglia。

与Cacti、Nagios、Zabbix等工具相比,Ganglia 更多地与收集度量数据并随时跟踪这些数据有关,可以用于集群的性能监控、分析和优化。

Ganglia就是这样一种工具。Ganglia 是 UC Berkeley 发起的一个开源监视项目,设计用于测量数以千计的节点。Ganglia主要监控集群的性能指标,如cpu 、mem、硬盘利用率, I/O负载、网络流量情况等, 也可以监控自定义的性能指标。通过Ganglia绘制的曲线很容易见到每个节点的工作状态,对合理调整、分配系统资源,提高系统整体性能起到重要作用。

还有就是ganglia客户端gmond 带来的系统负载非常少,这使得它成为在集群中各台计算机上运行的一段代码,而不会影响用户性能。

上面话有些官方:

我自己的理解是,让ganglia收集性能信息,更好的做服务性能的分析。

ganglia的框架:

213856306.gif

每个被检测的节点或集群运行一个gmond进程,进行监控数据的收集、汇总和发送。gmond即可以作为发送者(收集本机数据),也可以作为接收者(汇总多个节点的数据)。

通常在整个监控体系中只有一个gmetad进程。该进程定期检查所有的gmonds,主动收集数据,并存储在RRD存储引擎中。

ganglia-web是使用php编写的web界面,以图表的方式展现存储在RRD中的数据。通常与gmetad进程运行在一起。

在安装前先说明下,ganglia的安装会遇见各种各样的问题的,遇到问题可以搜,也可以找我问的。

要是大家没有这个耐心,可以先用ubuntu跑一个

在Ubuntu上安装Ganglia非常简单,首先安装下面三个包。因为要使用Web服务器才能看到图表,所以如果没有安装apache的话,会自动安装apache服务器。


sudo apt-get install ganglia-monitor ganglia-webfront

安装完成之后,gmetad和gmond两个服务会运行起来,使用下面的命令可以启动这两个服务。

sudo service gmetad start sudo service ganglia-monitor start sudo mv /usr/share/ganglia-webfrontend/ /var/www/ganglia

然后访问就行了!!!


下面是centos的安装过程 ~

#基础的开发包


yum -y install ntp make openssl openssl-devel pcre pcre-devel libpng libpng-devel libjpeg-6b libjpeg-devel-6b freetype freetype-devel gd gd-devel zlib zlib-devel gcc gcc-c++ libXpm libXpm-devel ncurses ncurses-devel libmcrypt libmcrypt-devel libxml2 libxml2-devel imake autoconf automake screen sysstat compat-libstdc++-33 curl curl-devel 
  • 近期,曙光成功斩获中国石油集团东方地球物理勘探有限责任公司(简称东方地球物理公司)2018年度最大规模地震资料处理解释系统分布式存储集群项目,曙光ParaStor云存储系统再获客户认可。

    据了解,东方地球物理公司在全国乃至全球设立数百个科研生产单位,业务覆盖范围广,并且拥有国内物探行业最大的数据处理中心。近五年,东方地球物理公司平均每年发现和落实圈闭近4500个,共建议各类井位21926口,被采纳率高达75%,被国家授予地质勘探功勋单位。

    随着物探行业的发展及勘探技术的不段演进,勘探精度越来越高,成像技术、人工智能技术也得到了广泛的发展和应用,这就对IT基础架构提出了的挑战,尤以成像技术和两高一宽采集技术对数据存储和数据处理的要求呈几何性成长。

    东方地球物理公司今年运作单体项目原始数据量初期将近1.5PB,这就要求处理解释的数据存储量必须达到10PB以上,并且要求IO吞吐量达到15GB/s以上,并且随着项目持续开展,原始数据量可达2.5PB,单体项目数据存储量至少要20PB以上,对分布式存储系统提出了严苛的挑战。

    针对该项目,曙光与客户深入研究,综合物探行业的应用特点、数据处理流程、数据结果展示特征、客户端打开特征等多方面因素,以曙光ParaStor产品为核心,对分布式存储架构进行优化和针对性调优,打造了一款完美的分布式存储系统解决方案,以应对物探行业数据存储量爆炸式增长。

    作为完全自主研发的分布式存储系统,曙光ParaStor在NAS存储市场中国区IDC排名连续5年排名前三,在石油物探、生物基因、气象环境、卫星遥感、广电媒体、视频大数据等多个领域均有大规模的应用,曙光的产品和服务有效保障了用户应用运行和数据安全。

    目前,曙光ParaStor已连续多年取得中石油、中石化、中海油等多个物探单位的定向采购。此次中标正是曙光以行业需求为驱动,不断探索先进信息技术与应用场景的深度融合,全面满足各领域信息化建设需求的有力实践。

  • 相关推荐:

  • 物探领域新突破,曙光斩
  • 石油勘探,看曙光分布式
  • 百度输入法自定义词库导
  • word怎么给文件加水印
  • 暴风影音闪电版怎么调字
  • 雷迎春解析达沃时代的分
  • 分布式监控系统ganglia配
  • 分布式RPC框架基于zerom
  • 安装部署分布式监控系统
  • Zabbix监控之节点分布式管
  • 网站内容禁止违规转载,转载授权联系中国云计算网