基于多属性综合评价方法的网络文学评价指标体系研究

高宁

从1998年3月22日蔡智恒把《第一次的亲密接触》贴在网上，历史的车轮行至2014年，网络文学走过了16年风风雨雨。截至2014年12月，中国网络文学用户规模达到2.94亿人（数据来源于CNNIC发布《第35次中国互联网发展统计报告》），庞大用户群为网络文学和整个产业链带来了可观利润，网络文学出版产业规模已经接近50亿。与传统文学相比，网络文学具有以下特征：创作主体的网民化;创作动机的娱乐化;文本特征的立体化;作者读者的互动化;文本传播的快捷化;文本价值的多元化。作为一种全新的数字内容产品， 网络文学快速发展的实际情况与备受争议的实际情况并存。现有的网络文学评价商业性质过于浓厚，理论建构明显滞后于评价实践。目前，业界网络文学评价本身同样也存在着不容忽视的局限和问题，例如评价过于通俗而缺乏深度;网络评价过于自由化导致的评价语言粗俗和价值偏误，等等。日前，国家新闻出版广电总局印发《关于推动网络文学健康发展的指导意见》，明确提出要逐步建立科学的网络文学作品评价体系。因此，能否建立一套切实可行、科学合理、兼顾最终用户需求与权威性的网络文学评价机制，对于广大的读者用户和政府监管部门，都有着非常重要的意义。

一、“多属性综合评价方法”及其可行性分析

所谓评价是指根据明确的目的来测定对象系统的属性， 并将这种属性变为客观定量的计值或者主观效用的一种行为。在客观世界中，评价的对象系统往往是具有多个不同的属性，在将它们进行比较以决定其优劣或决定取舍时，常需要先从多个不同的侧面加以评判， 然后再进行综合。

日前的综合方法较多，但在综合过程中权重的确定及价值的量化在方法上不甚完善，往往缺乏可比性，这对正确揭示评价对象系统的本质尚欠不足。为此，我们运用美国学者T.L.Saaty（萨迪）提出的层次分析法（简称AHP）和模糊数学等方法进行了研究， 提出了一种适用于多属性评价对象系统的以定量为主、定性与定量相结合的综合评价模型， 成为较为完整的辅助决策支持系统。

网络文学作品作为评价对象，具有多属性、多层次的特点，且在其诸多的属性中既有客观的定量指标，如作品点击量、下载量、销售量、获得道具数量等，也有主观的定性指标，如用户阅读评价、编辑推荐分数等。因此，使用多属性综合评价的方法对网络文学作品进行评价，在理论上具有较高的可行性和科学性。

二、多属性综合评价指标与权重设计

1.确定评价目标，建立评价因素集

本文的评价目标是对网络文学作品的质量进行综合评价。评价因素是对评价目标产生影响力、决定评价结果的因素。因素集是评价对象各个因素组成的集合。根据相关研究成果，结合出版工作的属性、网络文学作品的特性及网络文学作品出版的商业模式，从人气、获得道具、用户主管评价、作品出版销售情况等十一个方面设计一级指标。在一级指标建立的基础上，进一步细化为一系列二级指标，如表1所示。

2.确定各指标权重

权重值的确定直接影响综合评估的结果，权重值的变动可能引起被评估对象排列顺序的改变。所以，合理地确定综合评估各主要因素指标的权重，是进行综合评估能否成功的关键问题。本体系采取常用的专家打分法（即Delphi法）确定各级指标的权重，如表1所示。

表1 网络文学评价指标

三、多属性综合评价指标计算与结果确定

其测评方法主要借鉴了我国地区发展与民生指数（DLI）的测量方法，基本思路是根据每个评价指标的上、下限阈值来计算单个指标指数（即无量纲化），指数一般分布在0和100之间，再根据每个指标的权重最终合成总体综合评价指数。此种方法测算的指数不仅横向可比，而且纵向可比。

（一）指标上、下限阈值的确定

在计算单个指标指数时，首先必须对每个指标进行无量纲化处理，而进行无量纲化处理的关键是确定各指标的上、下限阈值。指标的上、下限阈值主要是参考各项指标实际数据最大值和最小值（如某作品点击量在所有作品中排名第一，那么就将其数值定为点击量上限阀值），以及指标的理论最大值和最小值（如编辑推荐指标，理论最大值既满分为10分，那么上限阀值就是10）。将 个指标记为  ，权重为  ，下限阈值和上限阈值分别为    和    ，无量纲化后的值为 。

（二）指标无量纲化

无量纲化，也叫数据的标准化，是通过数学变换来消除原始变量（指标）量纲影响的方法。

正指标无量纲化计算公式：

逆指标无量纲化计算公式：

（三）分类指数和总指数的合成

1.分类指标的合成方法

本体系由人气、获得道具、用户主管评价、作品出版销售情况等十一个分类组成。将某一类的所有指标无量纲化后的数值与其权重按公式（3）计算就得到类指数。

2.网络文学作品综合评价分数的合成方法

将网络文学评价指标体系中的27个指标无量纲化后的数值与其权重按公式（4）计算就得到网络文学作品的综合评价分数。

四、不足与展望

多属性综合评价作为一种评价方法，能够有效地解决网络文学作品评价中层次多、指标复杂等问题，可以将繁杂、主观的评价转化为客观、统一的评价，该模型的建立符合用户实际需求，在网络文学作品的评价中具有较好的应用前景。但是，任何一种评价方法都有其自身的缺点和片面性，本文研究的方法也是如此，其中凸显的问题有：

不足一：对于权重的确定，目前大多由专家凭经验主观给出，人为因素占主导，评判结果可能有出入。在实践中，可同时请几组专家对作品内容进行打分，尽可能覆盖各个用户群体进行专家选取，将各组专家的评判结果计算得出综合分值，得出对作品的最终评价。

不足二：没有进行实际数据的验证。由于各大网络文学出版网站的数据均属于商业保密范畴，因此本文的评价方法没有得到过实际应用的验证。在后续的研究中，希望可以通过项目合作研发等方式，联合出版机构进行实际验证，并将评价指标逐步优化，以得到更准确的评价结果。

综上，建立网络文学评价体系与评价标准，无论对于广大读者用户还是政府监管部门，都有着非常重要的意义与实际应用价值。笔者认为，无论采用何种手段，网络文学评价的最终目的应该是一种引导，应该以尊重网络文学创作的特点为前提，以服务最终用户为宗旨，在其本身特色的基础上，促进更多优秀作品拥有更长久的生命力。

（作者单位系中国新闻出版研究院）