Fast-flucos:基于DNS 流量的Fast-flux 恶意域名检测方法

2020-06-06 00:54韩春雨张永铮张玉
通信学报 2020年5期
关键词:域名分类器解析

韩春雨,张永铮,张玉

(1.南开大学计算机学院,天津 300071;2.中国科学院信息工程研究所,北京 100093;3.中国科学院大学网络空间安全学院,北京 100049)

1 引言

随着网络的应用越来越广泛,域名系统(DNS,domain name system)逐渐成为最重要的互联网基础设施之一,许多网络上的基础服务都与其息息相关。与此同时,恶意攻击行为也伴随互联网的快速发展而不断变化。僵尸网络作为当下网络环境中的最大威胁之一,能够迅速分发并扩散大量的蠕虫、木马等计算机病毒进行恶意代码(僵尸程序)的传播[1]。起初的恶意代码往往在程序中预置某一个域名指向其命令与控制服务器(C&C,command&control server),随后就有黑客采用域名生成算法(DGA,domain generation algorithm)技术产生大量的无关域名来隐藏真正的C&C 域名来躲避拦截。但使用的IP 地址仍然固定,无法防止因IP 地址被封堵而直接失效。所以攻击者又转而使用Fast-flux 技术,它是一种通过不断变更僵尸代理主机来隐藏恶意程序分发点并可实现负载均衡的DNS 技术。Fast-flux 网络为攻击者的恶意行为提供了高可用性和动态性[2],其目前被人们熟知的明显特点总结如下[3-5]。

1) 单域名映射的IP 地址量较大,且在僵尸代理主机迁移阶段IP 地址会逐渐增多。

2) IP 地址所在地理位置(国家或地区)分布较广。

3) IP 地址变化频度较高。

4) 通常权威映射记录生存空间(TTL,time to live)值较短。

5) 僵尸代理主机所分布的网段数目较多。

6) 僵尸代理主机所在网络所属的组织机构数目较多。

然而,以上特点并非是Fast-flux 恶意域名所独有的。以下2 种域名通常也会具有上述特征。

1) 域名循环系统(RRDNS,round-robin domain name system)。RRDNS 是一种典型的用于负载分配、实现负载均衡和高容错率的DNS 技术,它对用户发出DNS 请求的响应不是单条A 记录,而是一个A 记录列表,这就意味着这种域名也会对应很多服务主机的IP 地址。RRDNS 域名的A 记录列表以一种循环的方式来响应连续的DNS 请求。因此,一系列向RRDNS 发出的请求会直接得到不同IP 地址的服务器响应,从而有效地实现了负载均衡。

2) 内容分发网络(CDN,content delivery network)。CDN 是另一种可以实现负载均衡的服务系统,该系统在一定区域内的每个节点都向适合的用户提供完全相同的响应数据。正确设计和实施的CDN 可以提高访问远程数据的效率,增加带宽和冗余,同时减少时延。因此,该服务响应同一个域名的DNS 请求时,会返回大量带有不同IP 地址的A记录。CDN 也使用较低的TTL 值,以便在连接属性等相关参数发生改变时快速做出相应调整。

一直以来,利用Fast-flux 技术形成的僵尸网络依然广泛存在,由于CDN 和RRDNS 的技术特点均与Fast-flux 相似,因此当二者对应的域名部署在DNS上时,可能会被误检为Fast-flux 恶意域名,这无疑增加了Fast-flux 域名检测工作的难度[6]。而后出现的Double-flux 技术[7]使检测工作变得更加困难,该技术是对以前Single-flux 技术的升级,其由多个flux 代理主机担任域名解析代理,并由后端的Mothership 执行域名解析。通过flux 代理主机的快速切换,避免了以往单个被攻陷的DNS 服务器被封堵而无法继续提供服务的情况。即使某个flux 代理主机被列入黑名单,也可通过新的flux 代理主机继续提供服务。这两项技术的原理分别如图1 和图2 所示。

从图1 和图2 可以看出,Double-flux 型Fast-flux网络在结构上更加复杂,且因单点被封堵而引发故障的可能性也被大大降低。根据僵尸网络的行为过程,无论应对哪种Fast-flux 技术,高效地检测Fast-flux 域名都具有重大意义。

2 相关工作

在Fast-flux 僵尸网络刚出现时,Nazario 等[8]便开始对其展开了研究,分别从Fast-flux 僵尸网络的域名特性、域名存活时间、网络成员信息、网络大小、网络重合度等方面分析了其行为。Caglayan等[9]对垃圾邮件、恶意代码和钓鱼这3 种Fast-flux僵尸网络进行了全面的分类跟踪分析。Hu 等[10]通过一个部署在4 个洲共计240 个节点的轻量级DNS分析DIGGER,进一步分析了Fast-flux 网络及其他与其特性相似的网络的IP 地址特性。Passerini 等[11]采用主动探测的方法以获得比被动接收DNS 流量更多的Fast-flux 网络相关信息。通过这些研究工作,人们得到了一系列较成熟的Fast-flux 域名相关特性。于是,各种检测方法开始相继出现。

文献[12]通过域名对应IP 地址集合的相似性,对域名进行有监督的分层聚类分析,并采用决策树算法,初步实现了对Fast-flux 域名的检测。

图1 Single-flux 原理示意

图2 Double-flux 原理示意

文献[13]提出了一种基于真实编码遗传算法的Fast-flux 域名检测方法 GRADE(genetic-based real-time detection system),其在文中实验的检测结果可以达到较高的准确率,但主要利用的新特征依赖于递归请求往返时间标准差,而这一参数受网络环境波动的影响较大,直接影响了其性能的稳定性。

文献[14]提出了名为“SSFD(spatial snapshot Fast-flux detection system)”的检测方法,其核心思想是基于空间关系检测Fast-flux 域名。该方法引入了时区熵这一新特征,并且需要利用“空间快照”技术将样本域名解析列表中每个IP 地址归属的地理位置都标记在谷歌地图上。这使该方法对所使用的数据库要求较高,必须先创建、维护并每晚更新一个IP 地址与归属地理位置相对应的数据库,而一旦某域名的某些解析值在库中找不到对应,又面临“值缺失问题”,这势必影响其检测效果的稳定性。

文献[15]基于3 种可用于区分Fast-flux 网络和正常网络的参数计算出一个线性分数指标,称为Flux-score,用以判别Fast-flux 域名。

文献[16]分析了当时已有的Fast-flux 网络检测技术,认为检测的关键在于根据网络拓扑结构选取合适的探测位置部署分布式的检测系统,来实现对Fast-flux 网络的协同检测与关联分析。

文献[17]同样基于访问Fast-flux 域名时的响应时间每次都会有较大差异的特点,提出了一个通过计算FF-Score 来判定Fast-flux 域名的方法。然而该响应时间的差异性特征同样可能受到网络波动的干扰,从而影响检测效果的稳定性。

文献[18]基于决策树算法提出了EXPOSURE检测方法,提取了分别与时间、DNS 应答、TTL、命名相关的4 组特征。其中仅有少部分特征是针对Fast-flux 域名的特点而提取的,所以该方法在整体上可能仍然欠缺对检测目标的针对性。

文献[19]提出了一种聚类和有监督学习相结合的恶意域名检测思路,强调了如何有效区分CDN域名与Fast-flux 域名,并提取了与之相关的特征,实验达到了较高的准确率。不过该方法训练的SVM(support vector machine)分类器所用的数据来源于教育网,可能无法稳定有效地适用于常规互联网环境下的DNS 流量。

通过对上述文献的分析发现,现有方法可能存在如下不足。

1) 受网络环境波动影响较大,导致检测结果的稳定性较差。

2) 缺乏对Fast-flux 域名的针对性,导致检测结果的召回率或精确率不高。

3) 用于分类器训练的DNS 流量不具有普适性。

通过分析真实DNS 流量发现,Fast-flux 域名在大部分时间极少被访问,而在特定时间被集中访问。这项明显区别于CDN 等正常域名的重要特征一直没得到有效利用。以这项发现为出发点,并结合大洲覆盖、国家或地区距离、国家或地区向量等特征,提出了一种基于DNS 流量的Fast-flux 恶意域名检测方法,命名为Fast-fluco(sfast-flux detection based on countries)。

3 方法介绍

Fast-flucos 包含4 个模块:预处理、特征提取、分类器和关联匹配。预处理模块先从输入的大量DNS 流量中筛除一些乱码型域名请求记录,再结合所发现的时间分布特性过滤出很多不可能为Fast-flux 域名的请求记录,从而得到有效的DNS流量。特征提取模块根据我国广东省一段时间内DNS 流量的相应字段并结合已制作的国家或地区距离表计算出所有域名样本的7 组特征。通过已知标签样本集和计算好的相关特征,分别使用各种可能的特征组合,并结合多种机器学习算法来训练最佳分类器,从而输出一部分Fast-flux 域名。关联匹配模块利用WHOIS 注册者信息并结合特定的字符串匹配算法,根据分类器的输出发现更多Fast-flux域名。Fast-flucos 的结构如图3 所示。

图3 Fast-flucos 结构

图3 的DNS 流量具体是指在特定时间段内,某地区全部由客户端向DNS 递归服务器发出的DNS 解析请求的往返信息记录,按一定的采样率组成的DNS 解析记录列表。每行第一列至最后一列的字段分别表示请求源IP 地址、请求目的IP 地址、DNS ID、域名、请求类型、请求分组重复次数、该时间间隔下分组采样率、匹配标识、递归请求标识、权威请求标识、首个应答记录(RR,response record)的TTL 值、当前获得分组的时间、节点编码、请求分组长度、应答分组长度、首个RR 的类型、服务器响应标识、省份(或省级地区)标识、通信运营商标识和首个RR 解析值(含解析IP 地址列表)。

实验中所使用的数据主要是从我国某主流通信运营商在广东省的DNS 流量分析所得,时间段是从2017 年12 月1 日—7 日。选取这一段DNS 流量的主要原因是,使用从微步在线等第三方平台上获取的样本筛查后发现,在这大约60 万个不重复的符合命名规范的域名中,共出现了3 022 个与已知标签的Fast-flux 域名具有相同二级域名的样本,这很利于域名特征的提取。还有一部分数据是直接使用的微步在线提供的域名解析历史记录。

3.1 预处理

通过实验证实所发现的Fast-flux 域名的重要特性——大部分时间极少被访问,特定时间集中被访问。先将实验所用的时间段内的数据按“域名”字段进行去重处理,得到的域名集合定义为First 集合。之后的步骤如下[20]。

1) 将该时间段每天的DNS 流量都以Tmin 为单元进行分片。

2) 从First 集合中选出一个域名定义为First域名。

3) 再从原DNS 流量中该First 域名出现次数最多的一天中找出其对应的Second 请求记录。

4)计算该天内每个时间分片的count_value(计数值,表示Second 请求记录在该时间分片中出现的总次数)。

某First 域名的Second 请求记录,是满足以下任意条件的DNS 请求记录。

1) “域名”字段与First 域名完全相同。

2) 与First 域名的“首个RR 解析值”字段的交集不为空。

3) “域名”字段与First 域名具有相同的三级域名。假设count_valuei(i=1,2,3,…)表示第i个分片(window[i])的 count_value,则根据全部的count_valuei可以求出平均值,记为count_valueV,依此可计算出每个域名对应的AX 值,AX 值为所有中的最大值。上述过程可以总结为如下可以得到所有域名AX 值的算法。

算法1AX 赋值算法

输入First 域名,已分片的DNS 流量window[]

输出AX 值

当T取不同值时,AX 值的范围如表1 所示。

表1 当T 取不同值时AX 值的范围

从表1 可以看出,当T=5 min 时,AX 值可以更好地表示出一个域名是否为Fast-flux 域名。这也证实了所发现的重要特性——大部分时间极少被访问,特定时间集中被访问。

数据预处理模块的流程及原理如下。

1) 由Fast-flux 域名的定义可知,其在一定时间内单域名映射的IP 地址量很大,故对于待检测的DNS 流量,将解析IP 地址数量不足NIP的域名筛除。

2) Fast-flux 恶意域名的另一个特点是IP 地址所归属的国家或地区分布广,所以对于待检测的DNS 流量,将解析IP 地址对应的国家或地区数仅为NC的域名筛除。

3)根据所发现的时间分布特性,对于待检测的DNS 流量,将其中AX 值低于NAX的域名筛除。

为确定上述NIP、NC和NAX的取值,对来自微步在线等第三方平台上的Fast-flux 域名样本进行分析。最终确定了在预处理模块中3 个参数的取值分别为NIP=12、NC=1 和NAX=6。

3.2 特征提取

根据已有工作进行归纳和改进,并结合Fast-flucos 的基本思想,拟采用以下7 组共计506 个单特征[21-23]。

1) F1 TTL 特征

①最大TTL 值。

② 最小TTL 值。

③不同TTL 值的个数。

2) F2 IP 地址特征

①解析IP 地址的个数。

② 解析IP/65536(IP 地址前两段)的个数。

3) F3 子域名特征

①子域名的个数。

② 子域名的长度标准差。

③共享域名的个数。

4) F4 数字证书字节数

5) F5 地理特征

①解析IP 地址对应的国家或地区数量。

② 解析IP 地址对应的国家或地区涵盖的大洲情况。

③距离指数D_Score。

6) F6 国家向量表

7) F7 时间向量表

其中,共享域名的含义简述如下。若某域名的解析IP 地址列表中的某些IP 地址也被其他域名所解析,则这些域名称为该域名的共享域名[24]。

TTL 特征。通过调研[19]发现,正常域名的TTL值往往在1 天以上,而恶意域名为了使自己更加隐蔽,通常会设置很小的TTL 值。有60%以上正常域名的TTL 值是在1 200 s 以上的,而恶意域名的TTL值通常会小于1 000 s,虽然Fast-flucos 只关注恶意域名中的Fast-flux 域名,但是TTL 特征仍不失为一个可靠的特征。

数字证书字节数。正常域名在注册时通常具有完备的WHOIS 注册信息,而恶意域名的注册信息通常是很简略或随机的[19]。WHOIS 信息中有一项是数字证书,而恶意域名没有或信息很少,所以数字证书的字节数就可以直接作为一项有力的特征。

针对Fast-flux 恶意域名的特有特点,又为每个域名定义了距离指数D_Score、206 维的国家或地区向量表和288 维的时间向量表这3 组特征。

3.2.1 距离指数D_Score

众多已发表的论文中都提到了Fast-flux 域名的特点是映射的IP 地址归属的地理位置(国家或地区)分布的范围广并且分散度高,但是均未提及与具体的国家或地区分布频次和量化的地理广度信息相关的特征,所以根据Fast-flux 恶意域名样本与非Fast-flux 域名样本各自解析的IP 地址归属国家或地区(下文简称“解析国家或地区”)的地理广度信息,为每个域名定义了一个特征,称为距离指数D_Score。其表征了一个域名的解析国家或地区在地理位置分布上的广度与分散程度,为了计算此特征,需要先获取全部有国际顶级域名后缀的国家和地区(这里共计206 个)的行政中心的经纬度信息,并都采用弧度制表示。利用式(1)球面上两点距离公式,便可以得到全部206 个国家或地区的两两间距离表。这样,再根据式(2)便可求得某个域名的D_Score(即欧氏距离)。

其中,R是地球半径,(x1,y1)和(x2,y2)分别是球面上两点的弧度制坐标。

其中,Dij表示该域名中的第i个解析国家或地区与第j个解析国家或地区行政中心坐标间的球面距离,n表示该域名解析国家或地区的数量。

3.2.2 国家或地区向量表

本文统计了数量比为5 000:5 000 的正负样本中每一个域名分别解析到206 个不同国家或地区的次数,其中正样本选自微步在线等第三方平台上的Fast-flux 域名样本,负样本是从DNS 流量中随机选取的5 000 个不重复的非Fast-flux 域名。从统计结果可以看出,各不同国家或地区被解析到的频次与发起解析请求的域名是否为Fast-flux 域名的关联度很高,因此国家或地区向量表这一组特征被加入进来。该特征的具体表示形式为,对于某给定域名,获取其所有的解析国家或地区,统计全部206 个国家或地区各自出现的次数,从而形成这个域名的国家或地区向量表,即一个206 维的向量,其每个值都表示该域名解析到对应国家或地区的次数。

3.2.3 时间向量表

基于已经过验证的Fast-flux 域名区别于CDN等正常域名的重要特性——大部分时间极少被访问,特定时间集中被访问,加入时间向量表特征。若根据3.1 节中相关概念的定义和结论,将DNS 流量按照每5 min 进行分片,则该特征的具体表示形式为,对于某给定域名,获取该域名在其出现次数最多的一天中的count_value[],即一个288 维的向量,其每个值都表示该域名在其出现次数最多的一天中对应的时间分片内的count_value。

3.3 特征选择和分类器

根据已总结出的F1~F7 这7 组特征,分别使用各组特征的不同组合,并都使用3 种不同的机器学习方法(朴素贝叶斯、支持向量机和逻辑回归),利用scikit-learn 的机器学习工具库构建机器学习模型,使用引入了NumPy 包和Pandas 包的Python 语言完成实验。在计算国家和地区间的距离时,使用了Microsoft Excel 并编写了VBA 语言的宏。对每种特征组合情况都进行了10 折验证计算,取10 次的平均值作为最终的检测结果。最后列出其中平均效果最好的9 种特征组合,如图4 所示。

图4 使用不同的特征组合的分类效果对比

从图4 可以看到,在各种特征组合的情况下,使用逻辑回归算法取得了最佳效果。特征F6 和F7在图4 中频繁出现,足见其重要作用。然后尝试使用深度神经网络在最佳特征组合条件下进行分类效果测试,先设置隐藏层的层数为2,根据人为经验对各种神经元数组合进行实验,得到了一组最理想的组合,即(22,5),此时10 折验证的输出结果显示召回率是0.955 2、精确率是0.933 6、ROC_AUC是0.978 956。参考此结果继续调试当隐藏层层数分别为3~7 时的情况,分别寻找最佳的检测结果,如图5 所示。

图5 使用不同隐藏层层数的深度神经网络的分类效果对比

从图5 可以看出,随着隐藏层层数的增加,检测效果并没有明显变化,当隐藏层层数为5 时性能最佳,此时召回率是0.955 4、精确率是0.935 2、ROC_AUC 是0.981 0。可见,在Fast-flux 样本数量不够庞大、所提取的特征已经很具象化的条件下,深度学习并没有取得比常规机器学习更好的检测效果,使用逻辑回归分类器已经达到了较好的性能。

3.4 关联匹配

将从分类器得到的输出结果和原输入DNS 流量中的域名集合进行“关联匹配”,具体含义如下。

1)“关联”指的是注册者信息关联。在本节中定义从分类器中输出的域名为集合C,利用C中的域名关联WHOIS 注册者信息来二次挖掘可能被漏检的Fast-flux 域名。在原输入DNS 流量中的域名集合(本节定义为集合P)中,将与C中的域名具有相同注册者的域名都分离出来,在本节定义为集合S。

2)“匹配”指的是“0-z”化后的字符串匹配。某些个人或集体可能用不同的注册者信息注册了一系列域名用于恶意行为,为便于管理,其中很多域名被命名为仅字母不变而变换数字或仅数字不变而变换字母的形式,如果仅凭注册者信息则无法发现这部分域名。事实上这些域名都普遍指向了相同的IP 地址集合,即很可能使用了Double-flux 技术用以减小单点故障的可能性。所以找到具备这种特点的域名,则可以认为其同样是Fast-flux 域名,在实验中也取得了良好的效果。倘若C和S中共有域名m个,待字符对比的域名有n个,则单次对比的次数将是一个时间复杂度为O(mn)的问题,为此,需要引入字符串“0-z”化的概念。

于是,“关联匹配”算法的步骤如下。

步骤1将P中同时包含字母和数字字符的每个域名中的数字字符都变成0,成为集合P0;除顶级域名外的字母字符都变成z,成为集合P1。对字符串的这种操作称为“0-z”化,如图6 所示。

图6 步骤1 过程

步骤2将C和S中所有同时带有字母和数字字符的域名连接成一个长字符串T并“0-z”化,如图7 所示。

步骤3将P0中的每个字符串分别与T0进行字符串匹配,将P1中的每个字符串分别与T1进行字符串匹配,如图8 所示。

步骤4根据所有匹配成功的字符串,在P、P0和P1中都移除相应的域名/字符串,从P中移除的部分独立成为集合S′。然后将S内的全部域名转移进C中,如图9 所示。

步骤5在P中找到所有与S′内注册者相同的域名保存至集合S,并从P0和P1中移除相应的字符串。然后将S′内的全部域名转移到C中,如图10 所示。

图7 步骤2 过程

图8 步骤3 过程

图9 步骤4 过程

图10 步骤5 过程

步骤6将S中所有同时带有数字和字母字符的域名连接成一个长字符串T并“0-z”化,重复步骤3~步骤5。

步骤7重复步骤6 直到C内域名不再增加。

通过以上处理,将时间复杂度为O(mn)的逐个字符串比较问题转化为时间复杂度为O(n)的字符串匹配问题。而且,因为在“0-z”化后的字符串中存在大量重复的字符,很利于字符串匹配算法的快速运行。整个“关联匹配”算法就是通过WHOIS注册者信息和特定的字符串匹配算法相互迭代,使Fast-flux 域名集合C得到不断扩充,从而在分类器分类之后可以再发现一部分漏检的Fast-flux 域名。

4 性能评估

4.1 分类效果

首先,通过如表2 和图11 所示最佳特征组合的逻辑回归分类器详细的10 折验证结果可以看出,模型的稳定性较好。

表2 Fast-flucos 分类器10 折验证结果

图11 Fast-flucos 分类器10 折验证结果

然后,在参考文献中较知名且也同为针对Fast-flux 域名检测的是文献[13]提出的GRADE 方法,以此来进行对比实验。GRADE 方法共使用4 个特征:不同的A记录数量nA、不同的ASN 数量nASN、先前节点域名熵eDPN、往返时间标准差σRTT,再建立一个计算式:。利用真实编码的遗传算法并结合已知标签的样本确定5 个参数ω1、ω2、ω3、ω4和β的值,使当目标域名是Fast-flux 域名时对应的f(x)值均为正数,当目标域名是良性域名时对应的f(x)值均为负数。此外,又根据条件分别复现了检测恶意域名最经典方法之一的EXPOSURE[18]和如何检测Fast-flux 域名的文献[19]中基于算法生成域名的检测方法(AAGD,approach based on algorithmically generated domain)。使用相同的实验数据,得到如图12 所示的实验对比结果。

图12 4 种方法的实验对比结果

GRADE 方法在其原文中的准确率达到了98%,而在本实验中的精确率却较不理想。这说明该方法在稳定性方面稍弱一些,导致这一结果的可能原因简述如下。

1)采用的特征过少。

2)所使用特征中的σRTT过分依赖于网络环境的稳定性,若网络稍有波动,则σRTT出现的偏差便会影响最终域名判定的结果。

对于EXPOSURE 的表现,很可能要归咎于它所选用的特征对Fast-flux 域名的针对性不强。

导致AAGD 检测效果较不理想的可能原因如下。

1)其DNS 流量数据来源于教育网环境,不能很好地适应常规网络环境的DNS 流量。

2)虽然在特征提取方面考虑到了Fast-flux 域名,但是聚类的过程过于针对DGA 生成域名。

3)其在特征选择环节并没有在每组特征组合中都分别尝试所有备选机器学习方法,可能错失了更适合的机器学习方法。经实测发现,如果不使用SVM 算法,实际分类效果确实有了明显的提升。

在Fast-flucos 中,根据域名解析国家或地区的频次而生成的国家或地区向量表特征起到了很大作用,这可能与各个国家或地区的总体网络普及度、网民数量以及网络犯罪成本的不同有关。而Fast-flux 域名的解析国家或地区众多,也恰恰使这种在解析国家或地区分布上的规律可以更加明显地体现出来。

4.2 资源开销

对各方法的内存与时间开销进行对比,考虑到有些方法使用的特征需要在线获取,如Fast-flucos的WHOIS 注册者信息、GRADE 的σRTT等。而第三方网站又对用户访问频率做出了一些限制,为了使算法的执行时间不被这些因素所影响,先将这些特征全部保存到本地,再使用前文的训练数据集来执行每一个算法,得到了如表3 所示的运行结果。

表3 不同检测方法的资源开销对比

为了使对比更加清晰,将Fast-flucos 的运行时间定为单位1,并以此折算出另外3 种方法的相对时间开销。从表3 可以看出,除AAGD 外,其他3种方法的内存开销大抵相同。AAGD 的高常驻内存峰值主要由于SVM 算法本身的内存占用就相对较高。另外,虽然EXPOSURE 的检测效果略弱于Fast-flucos,但是在时间开销上非常出色,而AAGD过长的时间开销可能要归咎于聚类的过程及运行速度相对较慢的SVM 算法。

4.3 实际测试

使用我国某主流通信运营商在上海地区于2017 年11 月 29 日的真实 DNS 流量来验证Fast-flucos 的实际检测效果,共输出1 215 个域名,经第三方平台查询,并结合已有的Fast-flux 样本,得到其中Fast-flux 域名一共有1 186 个,准确率约为98%,其中依靠“关联匹配”发现的Fast-flux 域名有72 个,被误判的域名约为29 个,主要由广告服务网站域名等组成。这说明这两类网站的域名在所选取的特征上可能也存在许多与Fast-flux 恶意域名相似之处,可以考虑作为未来工作的新方向。

5 结束语

因以往的Fast-flux 域名检测方法在稳定性、针对性和对常规真实DNS 流量环境的普适性方面存在不足,提出了一种基于真实DNS 流量的Fast-flux恶意域名检测方法——Fast-flucos。该方法由预处理、特征提取、分类器和关联匹配4 个模块组成。在预处理模块加入了异常过滤步骤;在特征提取模块加入了专门针对Fast-flux 域名检测的D_Score、国家和地区向量表和时间向量表特征,共计提取506 个单特征;使用包括深度学习在内的多种机器学习方法进行实验,确定最佳分类器和特征组合;关联匹配模块可以结合WHOIS 注册者信息和一种简单的字符串匹配算法借助分类器的输出结果找出更多输入DNS 流量中被漏检的Fast-flux 域名。通过以上举措,Fast-flucos 最终较好地弥补了上述不足。通过实验与以往的方法进行检测效果对比,发现Fast-flucos 在召回率、精确率和ROC_AUC 均高于另外3 种方法的前提下,其在内存开销方面的表现与其他方法基本相同,仅在时间开销上稍弱于EXPOSURE 和GRADE。最后使用我国某主流通信运营商在上海地区的真实DNS 流量进行了实际测试,准确率约为98%,这表明Fast-flucos 可以普遍适用于常规真实互联网环境下的DNS 流量。

猜你喜欢
域名分类器解析
学贯中西(6):阐述ML分类器的工作流程
三角函数解析式中ω的几种求法
基于朴素Bayes组合的简易集成分类器①
《江苏教育研究》官方网站域名变更公告
基于特征选择的SVM选择性集成学习方法
睡梦解析仪
基于差异性测度的遥感自适应分类器选择
电竞初解析
对称巧用解析妙解
顶级域名争夺战:ICANN放出1930个通用顶级域名,申请者有上千家