大数据的特点及未来发展趋势研究

2018-12-22 00:04田铁刚
无线互联科技 2018年9期
关键词:数据处理价值发展

田铁刚

(黑龙江工业学院,黑龙江 鸡西 158100)

在互联网、云计算之后,大数据是又一项备受热议的信息技术。随着信息技术的快速发展,大数据为人们的生活与工作带来极大的便利。人们生活中的事物经过数据化处理后,通过数据格式存储于分析,呈现出更大的价值。

1 大数据的概况

1.1 大数据的概念

随着云时代的到来,大数据备受关注,其不再只是停留于字面意义的非结构化和半结构化的数据,而是慢慢成为一种新的观察世界的方法和手段。通过数据化思维与先进处理技术,探索和分析巨大数据资源之间的关系,构建出一个透明化的世界。

大数据是互联网发展到现在的一种现象,通过云计算创新技术,越来越多的数据被人们轻松地收集和利用,在社会各个行业之中,大数据也发挥着重要作用,创造出巨大的价值。

关于大数据的特点,业界将其主要分为4个层面:(1)巨大的数据量。大数据已经从TB级别快速地升到了PB级别。(2)繁多的数据类型。大数据的类型包括网络日志、音频、图片、地理位置等。(3)价值密度低。例如在一些视频监控中,能够发挥价值的视频可能只是很短的一两秒时间。(4)处理速度快,对时效性要求高。这些特点也是当前大数据与传统数据的本质不同[1]。

1.2 大数据的重要价值体现

并不是所有的数据都是为了长远利益而被记录,很多数据记录下来只是一种操作的基础,如若脱离记录,导致后续操作的难以开展与进行。

1.2.2 备份和监督价值

数据放入记录是相对于之前的操作过程,提供了一个虚拟备份,记录着不同方的操作过程、操作次序,甚至详细记录了不同环节的操作内容。大数据的这种作用也是被人们所认可的最初始价值。

1.2.3 纠正偏离的价值

一个系统在运行中,往往出现不同于以往的差异性,当代表差异的数据通过极值或者其他的方式表现出来,就会打破系统原有的平衡,内部环节或者资源跟不上。为确保系统的正常运转,适当采用外力十分有必要。

1.2.4 预测价值

预测价值是当前业界对大数据最为重视的价值。基于以往记录的数据信息,开展深入的研究分析,挖掘数据的规律,进行系统性的优化升级。其决定着系统未来的长期成长与演变能力[2]。

2 大数据技术的特点

2.1 开源软件的广泛应用

随着信息技术的快速发展,大数据技术被广泛应用在社会生活的各个方面,而每个领域都朝着智能化、科技化方向发展。由此,像Hadoop,Hbase,MongoDb和CounchDB等这些各具特点功能的开源软件,在社会各行业中被广泛应用。

中国现代民俗学大致经历了从事象研究到事件研究的范式转换,但这是远远不够的,王霄冰从民众群体(民)与知识体系(俗)之间的关系入手,提倡关注“民俗事件中的社会关系”,这相比“语境中的民俗”的提法而言指向更加明确。不过还应注意的是,“熟人社会”内部借助民俗活动对已有社会关系的刷新或调整,与“生人社会”借助民俗活动而达成的开放式的社会关系,虽然都属于多主体之间的民俗关系,但其差异甚为明显,加以区别是必要的。民俗在“熟人社会”与“生人社会”所承担的不同角色,启发我们应在更广泛的社会视野中体认民俗。

2.2 人工智能技术的不断引进

大数据技术是从巨大的数据资源中获取有价值的数据,并对其进行分析处理。特别是在信息化爆炸的时代,人们每天接触着各种各样的信息,因而智能处理大数据,提高处理数据的水平能,显得尤为重要。在大数据的管理、分析及可视化等方面,都与人有着密切的关系。由此,大数据技术不断引进人工智能技术,通过机器学习、数据挖掘、模式识别等人工智能技术处理大数据。

2.3 分布式处理架构与非结构化数据处理技术

随着科技的不断发展,传统的数据处理难以满足客户的数据需求,在人们的不断探索中,在大数据技术的处理过程中,分布式处理架构式成为大数据处理的主要模式。此外,分布式文件系统、分布式编程环境等技术都得到广泛应用。

此外,大数据技术包含丰富的数据处理技术,与传统文本信息不同的是非结构化处理数据,指的是通过图片、文档及视频等形式。随着云计算技术的发展,在大数据处理中非结构化数据采集技术也发展得越来越快[3-4]。

3 大数据未来发展趋势

当前,大数据在帮助政府实现市场经济调控、预警灾难、防范公共卫生安全及监督社会舆论等方面发挥着重要的作用,提升紧急及应变能力,提升企业服务质量等。大数据技术不仅在各个领域得到广泛应用,而且未来有着良好的发展前景[5-7]。

3.1 人工智能技术的结合

大数据分析的目的就是为了从数据资源中挖掘出有价值的信息。为更准确更深层次地挖掘信息资料,而不是单纯地统计和分析数据,所以需要不断提高计算机的智能计算能力,以促使提高计算机系统分析数据的能力,从而做出准确的推理及决策。实现这些最核心的技术能力就是人工智能。由此,人工智能研究也成为近年来学术界与企业界备受重视的课题,一方面为提升计算机硬件性能,另一方面是适应时代需求,满足不断快速发展的计算机技术,更快更准确地处理巨大的数据。

3.2 以数据科学为基础的多学科的融合

在大数据时代,许多学科的研究表面看来存在差异,但是从数据研究的角度来看,学科之间存在共通点,因此,随着数字信息时代的到来,以数据科学为基础,多学科呈现数据一致性,因此可采用统一的思想进行统一研究。

3.3 未来大数据技术的核心是数据分析

在数据处理中,数据分析占据着重要的作用。随着时代的发展,其也会成为大数据技术的核心。大数据的价值表现为,对大规模数据资源的智能处理,从中获取相关有价值的信息。若要逐步实现大数据的这个功能,就必须分析和挖掘数据。其中数据分析步骤的基础就是采集、存储于管理,从而经过分析后得出结果,并应用在相关的行业领域。由此,未来大数据技术的发展,数据分析也将是一个重要的发展趋势。

3.4 实时性的数据处理方式

当前人们生活中获取信息速度快,对此为满足生活需求,大数据系统的处理方式也应不断创新发展,传统的批量化处理方式,对大数据处理存在局限性,通常适用于处理数据报告这种对频率无需达到分钟级别的场景,但是如若遇到要求高的场合,传统的数据处理方式难以满足需求。

同时,传统的数据仓库系统、链路挖掘等应用,往往一小时或者天为单位计算数据处理时间。因为未来大数据发展主要强调时效性与实效性,所以未来数据处理也要突出这两点。例如股票交易处理,数据处理时间要以分钟,甚至用秒计算,这些行业对数据处理的要求很高。因而,未来发展中,实时性的数据处理也将成为一个发展趋势,从而不断促进大数据技术的发展和创变。

3.5 基于云计算的数据分析平台日益完善

未来随着云技术的不断发展和广泛应用,云计算也将为大数据技术发展提供一个广阔的数据处理平台和技术支持。未来在大数据技术中,分布式计算方法、存储空间和计算资资源等,这些重要内容都来源于云计算。同时,云计算丰富的IT资源成为大数据的技术支持。未来随着云计算技术和平台的日益完善与成熟,大数据技术也将得到快速提升与发展,处理数据的水平能力也得到显著提高。

此外,未来大数据将与互联网、物联网等技术领域相互交叉融合,产生更多融合不同行业、不同领域数据的综合性应用。

3.6 大数据安全与隐私

大数据的安全和隐私问题一直备受国内外关注,未来这个问题依然是学术界和企业界的重点研究与探索的方向。大数据及相关核心资源,不仅关系到商业机密,而且甚至涉及国家主权,因此,如何保护大数据的安全及相关用户的隐私,成为备受社会各界关注和亟待解决的社会问题。但是当前大数据应用所产生的隐私问题和体系自身存在的安全防范问题,尚未取得实质性进展和突破,由此,未来大数据的安全与隐私问题依然是一个重要的发展趋势。

3.7 大数据技术课程体系建设和人才培养

随着大数据技术的快速发展,为满足相关行业对高水平大数据技术人才的需求,政府、高校及相关单位应当加快建立大数据技术人才教育培养体系,融合计算机、数学分析统计及人才培养等相关学科,培养满足社会市场需求的大数据技术人才。

4 结语

综上所述,随着信息技术的快速发展,在人们的工作生活中,大数据技术占据着重要地位,对社会各个行业领域的发展发挥着重要作用。本文简单分析大数据的概况、特点,指出在互联网、云计算的发展推动下,未来大数据将朝着更智能化、先进化、广泛化的方向发展,方便人们的生活、为科技发展提供准确的数据决策,最终推动社会经济的快速发展。

[参考文献]

[1]郭丽娟.大数据的特点及未来发展趋势[J].信息通信,2014(10):195.

[2]郭帅.浅析大数据特点及发展趋势[J].信息与电脑(理论版),2016(2):25-26.

[3]钱志森.浅析大数据的应用及发展前景[J].信息通信,2014(5):168.

[4]刘瑞玲.浅谈大数据应用现状及发展趋势[J].科技展望,2017(15):56-59.

[5]胡茹.浅谈大数据应用现状及发展前景[J].科学技术创新,2014(32):19.

[6]刘琳.浅谈大数据技术发展趋势[J].计算机光盘软件与应用,2014(24):40-41.

[7]王臻,贺小培,张楠.大数据背景下公共信息服务供给与运营机制的困局与对策—“智慧朝阳服务网”案例分析[J].电子政务,2014(2):54-59.

猜你喜欢
数据处理价值发展
认知诊断缺失数据处理方法的比较:零替换、多重插补与极大似然估计法*
ILWT-EEMD数据处理的ELM滚动轴承故障诊断
迈上十四五发展“新跑道”,打好可持续发展的“未来牌”
砥砺奋进 共享发展
一粒米的价值
改性沥青的应用与发展
“给”的价值
基于希尔伯特- 黄变换的去噪法在外测数据处理中的应用
“会”与“展”引导再制造发展
基于POS AV610与PPP的车辆导航数据处理