《一种监控数据采集服务器的方法.pdf》由会员分享,可在线阅读,更多相关《一种监控数据采集服务器的方法.pdf(5页珍藏版)》请在专利查询网上搜索。
1、10申请公布号CN104202218A43申请公布日20141210CN104202218A21申请号201410467251022申请日20140915H04L12/26200601H04L12/2420060171申请人浪潮软件集团有限公司地址250101山东省济南市高新区科航路2877号72发明人徐宏伟左少标贾以真74专利代理机构济南信达专利事务所有限公司37100代理人姜明54发明名称一种监控数据采集服务器的方法57摘要本发明是对一种监控数据采集服务器的方法,解决了对数十台、数百台及更多的服务器难以监控的困难,目前,有数百台服务器每天进行互联网采集,需要对互联网数据的采集状态、采集效率。
2、、存储空间等等进行监控,这就需要人工进行监控及统计,监控数据采集服务器的方法可以极大程度上减少人工量,又能及时反馈服务器出现的问题。51INTCL权利要求书1页说明书2页附图1页19中华人民共和国国家知识产权局12发明专利申请权利要求书1页说明书2页附图1页10申请公布号CN104202218ACN104202218A1/1页21一种监控数据采集服务器的方法,其特征在于通过对服务器地址配置,对各个服务器的采集程序进行模拟操作,实现对各个模块状态的采集,具体步骤如下(1)完成对监控的服务器、数据库、邮箱、采集类型的相关配置;(2)通过监控手段,对数据库的采集程序的如下方面进行监控1)数据量的监控。
3、,分为已采集数据量和未采集数据量;2)采集效率的监控,采集互联网单个网页页面信息所需要的时间;3)异常监控,将采集程序出现异常时产生的大量数据存到MONGODB数据库中,并在服务器程序停止运行时,发送告警信息;4)数据库监控,例如对数据库剩余空间和数据表操作的监控;5)自动生成监控图,包括ORACLE数据库存储量监控图,HBASE数据库监控图和HADOOP系统监控图。权利要求书CN104202218A1/2页3一种监控数据采集服务器的方法技术领域0001本发明涉及ORACLE数据库监控,HADOOP数据库监控,MONGODB技术领域,具体地说是一种监控数据采集服务器的方法。背景技术0002随着。
4、网络和信息技术的不断普及,人类产生的数据量增长速度不断加大。据IDC的报告,未来10年全球数据量将以40的速度增长,2020年全球数据量将达到35ZB。新数据源的大量出现导致了非结构化、半结构化数据爆发式增长,数据的计量单位由TBPBEBZB逐级别进行调整。这些产生的数据已远远超越了目前人力所能处理的范畴。这标志着大数据的时代已然到来。0003为了采集纷繁复杂的互联网数据,需要部署数十台乃至上百台服务器进行并发操作。目前的监控还处在非智能阶段,需要人工登录每个服务器检查数据的采集情况。每天重复相同的工作,效率低下,人工成本高。再加之服务器偶尔出现的不稳定状况,还会导致出现数据监控不及时、采集数。
5、据不完整等情况。发明内容0004本发明的目的是提供一种监控数据采集服务器的方法。0005本发明的目的是按以下方式实现的,通过对服务器地址配置,对各个服务器的采集程序进行模拟操作,实现对各个模块状态的采集,具体步骤如下(1)完成对监控的服务器、数据库、邮箱、采集类型的相关配置;(2)通过监控手段,对数据库的采集程序的如下方面进行监控1)数据量的监控,分为已采集数据量和未采集数据量;2)采集效率的监控,采集互联网单个网页页面信息所需要的时间;3)异常监控,将采集程序出现异常时产生的大量数据存到MONGODB数据库中,并在服务器程序停止运行时,发送告警信息;4)数据库监控,例如对数据库剩余空间和数据。
6、表操作的监控;5)自动生成监控图,包括ORACLE数据库存储量监控图,HBASE数据库监控图和HADOOP系统监控图。0006本发明的优异效果解决了对数十台、数百台及更多的服务器难以监控的困难。目前,有数百台服务器每天进行互联网采集,需要对互联网数据的采集状态、采集效率、存储空间等等进行监控,这就需要人工进行监控及统计。监控数据采集服务器的方法可以极大程度上减少人工量,又能及时反馈服务器出现的问题。附图说明0007图1是监控数据采集服务器的工作原理图。说明书CN104202218A2/2页4具体实施方式0008参照说明书附图对本发明的监控数据采集服务器的方法作以下详细地说明。0009本发明通过对每台服务器的采集状态进行监控,极大程度上缓解人工监控的诸多局限性。实施例0010由于每台服务器采集的类型、存储情况都不一样,因此需要通过以下几步进行实施1安装监控数据采集的系统、配置关系型数据库;2配置MONGODB数据库;3启动定时监控插件;4展示监控后的数据,生成监控图表。0011除说明书所述的技术特征外,均为本专业技术人员的已知技术。说明书CN104202218A1/1页5图1说明书附图CN104202218A。