一种基于用户行为分析的DNS数据挖掘系统及方法.pdf

本发明揭示了一种基于用户行为分析的DNS数据挖掘系统及方法，包括DNS节点、DNS系统接入交换机、DNS解析日志提取服务器、日志分析服务器、日志数据库，所述DNS节点与DNS系统接入交换机相连接，DNS业务流从DNS节点流向DNS系统接入交换机，DNS系统接入交换机跟DNS解析日志提取服务器相连接，DNS解析日志提取服务器跟日志分析服务器连接，日志分析服务器连接到日志数据库。本发明实现了用户关注站点的筛选；实现了智能DNS功能的升级；监测了用户域名解析请求量，及时发现了异常。

权利要求书
1.  一种基于用户行为分析的DNS数据挖掘系统，其特征在于：包括DNS节点、DNS系统接入交换机、DNS解析日志提取服务器、日志分析服务器、日志数据库，所述DNS节点与DNS系统接入交换机相连接，DNS业务流从DNS节点流向DNS系统接入交换机，DNS系统接入交换机跟DNS解析日志提取服务器相连接，DNS解析日志提取服务器跟日志分析服务器连接，日志分析服务器连接到日志数据库。

2.  根据权利要求1所述一种基于用户行为分析的DNS数据挖掘系统，其特征在于所述DNS节点包括IP地址和域名，所述IP地址和域名是一一对应的关系。

3.  根据权利要求1所述一种基于用户行为分析的DNS数据挖掘系统，其特征在于所述DNS系统接入交换机包括处理器模块和接口模块。

4.  根据权利要求1所述一种基于用户行为分析的DNS数据挖掘系统，其特征在于所述DNS解析日志提取服务器通过DNS系统接入交换机端口镜像，采集DNS系统上下行流量，提取成DNS解析与应答，形成日志。

5.  根据权利要求1所述一种基于用户行为分析的DNS数据挖掘系统，其特征在于所述日志分析服务器采集日志文件，从DNS解析日志提取服务器上通过FTP获取日志文件，解压之后，进行入库，同时承担查询的WEB界面。

6.  根据权利要求1所述一种基于用户行为分析的DNS数据挖掘系统，其特征在于所述日志数据库包括存储器，日志信息存储在所述日志数据库中。

7.  根据权利要求2所述一种基于用户行为分析的DNS数据挖掘系统，其特征在于所述域名包括一级域名、子域名和国家及地区域名。

8.  根据权利要求3所述一种基于用户行为分析的DNS数据挖掘系统，其特征在于所述接口模块包括千兆光纤接口和光纤扩展接口。

9.  一种基于用户行为分析的DNS数据挖掘方法，其特征在于包括以下几个步骤：
A：DNS节点将DNS业务流发送给DNS系统接入交换机；
B：在DNS系统接入交换机配置端口镜像；
C：通过DNS解析日志提取服务从数据流中提取DNS相关日志；
D：通过日志分析服务器对相关日志进行分析收敛，然后将分析后数据存储到日志数据库中。

说明书一种基于用户行为分析的DNS数据挖掘系统及方法
技术领域
本发明涉及通信领域，尤其涉及一种基于用户行为分析的DNS数据挖掘系统及方法。
背景技术
随着移动业务大力开展，在宽带运营的关键资源之一—互联网内容上，和已在宽带市场耕耘多年的非移动业务相比仍非常薄弱。为改变这一窘境，移动业务人员开展了内容资源的大力引入，但是一方面由于互联网网站繁多，短期内能引入的网站数量有限，客户仍然有很大的概率访问那些暂未能引入到移动网内的互联网资源；另一方面，即使是一些已经引入网内的资源，也很可能由于技术原因，按照常规网址访问也很可能引导到其它网服务器上。因此，在执行TOP200站点引入策略的过程中，用户感知提升仍然不明显。
发明内容
为解决上述问题，本发明的目的在于提供一种基于用户行为分析的DNS数据挖掘系统及方法。
为实现上述目的，本发明的技术方案为：
一种基于用户行为分析的DNS数据挖掘系统，包括DNS节点、DNS系统接入交换机、DNS解析日志提取服务器、日志分析服务器、日志数据库，所述DNS节点与DNS系统接入交换机相连接，DNS业务流从DNS节点流向DNS系统接入交换机，DNS系统接入交换机跟DNS解析日志提取服务器相连接，DNS解析日志提取服务器跟日志分析服务器连接，日志分析服务器连接到日志数据库。
在其中一个实施例中所述DNS节点包括IP地址和域名，所述IP地址和域名是一一对应的关系。     
在其中一个实施例中所述DNS系统接入交换机包括处理器模块和接口模块。
在其中一个实施例中所述DNS解析日志提取服务器通过DNS系统接入交换机端口镜像，采集DNS系统上下行流量，提取成DNS解析与应答，形成日志。
在其中一个实施例中所述日志分析服务器采集日志文件，从DNS解析日志提取服务器上通过FTP获取日志文件，解压之后，进行入库，同时承担查询的WEB界面。
在其中一个实施例中所述日志数据库包括存储器，日志信息存储在所述日志数据库中。
在其中一个实施例中所述域名包括一级域名、子域名和国家及地区域名。
在其中一个实施例中所述接口模块包括千兆光纤接口和光纤扩展接口。
本发明还包括一种基于用户行为分析的DNS数据挖掘方法，该方法包括以下几个步骤：
A：DNS节点将DNS业务流发送给DNS系统接入交换机；
B：在DNS系统接入交换机配置端口镜像；
C：通过DNS解析日志提取服务从数据流中提取DNS相关日志；
D：通过日志分析服务器对相关日志进行分析收敛，然后将分析后数据存储到日志数据库中。
通过上述设计，本发明一种基于用户行为分析的DNS数据挖掘系统及方法实现了一下有益效果：
1、挖掘了非著名域名：非著名域名挖掘，基于域名解析请求量的分析，可以挖掘非著名域名。Gtmg.cn，5rmrp.com等非著名域名，却在TOP100榜上有名。
2、按照业务部分需求提供了子域名清单：基于一级域名的域名关联分析，对TOPN的网站域名进行细分，按解析量提取子域名，输出用户关注更多的子域名清单，按业务部分需求，提供qq\qvod\uusee等子域名清单。
3、实现了用户关注站点的筛选：用户关注首页与用户关注站点有所不同，用户关注的TOP15首页和用户关注的TOP15站点有较大差异，这和用户安装的软件有极大的关系，引入360\毒霸\搜狗\PPSTREAM站点同样意义非凡。
4、实现了智能DNS功能的升级：考察智能DNS功能升级的必要性，对移动省网DNS域名解析的TOP30000域名进行解析结果分析，其中同时包含移动地址和非移动地址的域名量仅占总量的0.64%。可见本地智能DNS排序功能升级的效果不会太好。虽然分析到了该数据，但本地DNS仍然按集团的要求进行了排序。
5、监测了用户域名解析请求量，及时发现了异常：监测用户域名解析请求量，及时发现异常行为， DNS域名解析请求量从每日2亿条，上涨为每日12亿条。但单用户的域名解析请求量应该在一个合理范围。而用户异常的请求也是导致请求量大量上涨的原因。从监控中曾发现缓存系统、专线用户的异常请求。
附图说明
图1为本发明的组成图。
图2为本发明的域名关联分析图。
具体实施方式
下面结合说明书附图对本发明的具体实施方式进行说明。
请参阅图1，本发明一种基于用户行为分析的DNS数据挖掘系统包括DNS节点、DNS系统接入交换机、DNS解析日志提取服务器、日志分析服务器、日志数据库，所述DNS节点与DNS系统接入交换机相连接，DNS业务流从DNS节点流向DNS系统接入交换机，DNS系统接入交换机跟DNS解析日志提取服务器相连接，DNS解析日志提取服务器跟日志分析服务器连接，日志分析服务器连接到日志数据库。
在其中一个实施例中所述DNS节点包括IP地址和域名，所述IP地址和域名是一一对应的关系。                                
在其中一个实施例中所述DNS系统接入交换机包括处理器模块和接口模块。
在其中一个实施例中所述DNS解析日志提取服务器通过DNS系统接入交换机端口镜像，采集DNS系统上下行流量，提取成DNS解析与应答，形成日志。
在其中一个实施例中所述日志分析服务器采集日志文件，从DNS解析日志提取服务器上通过FTP获取日志文件，解压之后，进行入库，同时承担查询的WEB界面。
在其中一个实施例中所述日志数据库包括存储器，日志信息存储在所述日志数据库中。
在其中一个实施例中所述域名包括一级域名、子域名和国家及地区域名。
在其中一个实施例中所述接口模块包括千兆光纤接口和光纤扩展接口。
本发明还包括一种基于用户行为分析的DNS数据挖掘方法，该方法包括以下几个步骤：
A：DNS节点将DNS业务流发送给DNS系统接入交换机；
B：在DNS系统接入交换机配置端口镜像；
C：通过DNS解析日志提取服务从数据流中提取DNS相关日志；
D：通过日志分析服务器对相关日志进行分析收敛，然后将分析后数据存储到日志数据库中。
请参阅图2，本发明一种基于用户行为分析的DNS数据挖掘系统及方法中的域名关联分析图，基于域名解析请求量的分析，可以挖掘非著名域名。Gtmg.cn，5rmrp.com等非著名域名，却在TOP100榜上有名。
综上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照上述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对上述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。