数据分析系统
- 基于Spark的大数据分析系统设计和实现
rk的大数据分析系统设计方案。该系统的框架选择适用性较强的Spark计算框架为主,能够支持多种类型语言的编程,此外还可以实现对大数据的交互式、批量处理、计算分析。基于Spark的大数据分析系统,以实现对大数据的实时分析。1 Spark技术概述Spark作为UC Berkeley AMPLab所开发的一款大数据计算框架,它和Hadoop两者之间既有相似部分,也有不同[3]。不过,Spark和Hadoop两者都具有分布式优点,能够实现对大数据的快速集群计算,并
信息记录材料 2023年9期2023-10-31
- 基于大数据技术的用户用电采集数据分析系统设计
用电采集数据分析系统进行研究，通过建立异常指标库，进一步加强对配电网点运行效果和质量的监测与控制。该系统是一个集成多种技术的实时信息采集和分析系统，具备信息采集、费控管理、远程抄表、负荷监控以及线损分析等多项优势[1]。利用移动网络、光纤专网等先进通信手段，该系统能够实现系统主站与现场终端之间的高效通信，从而有效监测电网中设备的运行状态、负荷情况、供电状况、电能质量以及线损等重要指标，并对客户的日常用电情况进行深入分析。该系统不仅能满足快速发展的经济社会对
通信电源技术 2023年15期2023-09-11
- 基于云计算的企业大数据分析系统研究
过构建大数据分析系统，可以更好地掌握行业数据、企业内部数据信息的规律和潜在信息等，为促进企业决策和发展战略制定提供必要依据。在构建大数据分析系统中，云计算技术也是重要的组成部分，这一技术的有效应用，对于优化系统设计、提升系统性能等都具有重要作用。1 云计算和大数据技术概述1.1 云计算技术云计算技术应用中，需要借助相关硬软件资源支持，结合客户的具体需要，在多个端口以及规格应用，为客户提供服务[1]。在云计算技术应用过程中，搭建云平台是基础工作，这是支撑平台
无线互联科技 2023年1期2023-03-20
- 新疆煤质数据分析系统优缺点及改进建议
建立煤质数据分析系统可以对煤炭基础资料进行现代化管理，为相关企业和部门提供煤质数据基础依据，带来一定的社会经济效益。1 建立煤质数据分析系统的意义新疆煤质数据分析系统从最简单的单个数据表格汇总发展到能够进行煤质综合评价，可以提高煤炭开采率和利用率，可以通过查询功能得到相应的信息，也可以提升客户对煤质报告的满意度和准确率，使煤矿企业的社会形象提升，推动了各方的经济发展。通过查询该系统里的煤质数据和评价报告可以在地质报告的前期设计、施工管理和总结报告中给与相应
新疆有色金属 2022年2期2022-11-22
- DRG数据分析系统运维期风险识别与业务推动
。DRG数据分析系统具备组内可比性强和分析指标清晰全面的特性，是很好的数据标化工具，主要用于住院医疗服务监测分析和医疗付费改革，数据来源是病案统计编目后的病案首页。DRG数据分析系统各指标分析精准度可以具体到患者详细的病历资料，下钻分析维度、指标数目极多。本文将医疗大数据与DRG管理工具结合，运用信息技术对电子病历进行分词、切词和归一等操作，实现数据后结构化，极大范围的拓展DRG分析指标，借助大数据的思维和方法进行研究，突破传统分析模式，有效延伸和拓展DR
网络安全技术与应用 2022年8期2022-11-20
- 一种基于源数据适配的大数据分析系统
适配的大数据分析系统，该系统在不建立大数据仓库的情况下，能很好地解决多个业务系统数据关联、数据查询、信息孤岛的问题，将分散的业务系统做整合，变成业务上统一的系统。设计的系统有以下特点：（1）该系统定位为数据中间件平台，不用建立统一数据仓库，即可达到数据统一、数据关联、统一查询的目的。（2）在统一认证登录平台基础上增加了数据共享的功能，真正做到数据的统一。（3）本系统下分三个子系统，通过三个子系统：业务系统接口适配系统、数据调用和组合规则适配调用系统、服务调
现代信息科技 2022年17期2022-11-03
- 职业技能竞赛可持续发展提升对策研究*
能竞赛大数据分析系统及竞赛潜质测评与引导训练系统，助力职业技能竞赛可持续发展和整体水平提升。1 政策基础1.1 符合政策需求2015年，国务院办公厅发布了《促进大数据发展行动纲要》指出大数据发展是国家中长期战略的重要组成部分[3]，在职业技能竞赛中涵盖的数据参数多种多样、相互影响，建立大数据分析系统是较好的解决方案。此外，2018年，由教育部印发的《教育信息化2.0行动计划》，提出要实现专用资源转向大资源建设，大数据、云计算等信息化手段可以进一步提升教育质
四川农业与农机 2022年5期2022-10-28
- Debye-screening effect on electron-impact excitation of helium-like Al11+and Fe24+ions
发的实时数据分析系统，并在突发情况，自然灾害发生的情况下保证数据不会丢失，是智慧城市发展的第二个需要面临的问题。3.1. Test of numerical methodsIn order to verify the numerical methods and computing codes, the present EIE cross sections for the transition 1s→2p in an Ne9+ion are compared
Chinese Physics B 2022年4期2022-04-12
- 基于大数据的高校学生一卡通数据分析系统的设计
生一卡通数据分析系统设计思路各高校信息化系统包含了学生工作管理系统，教务管理软件，校园一卡通软件，校园网络管理软件，门禁管理系统等。通过对学生一卡通数据分析系统的建设，将学校内的各应用系统数据利用大数据技术。①确定数据来源，包括宿舍门禁记录，食堂消费记录，图书借阅记录，评奖评优记录，综合测评数据。②利用ETL 工具将数据同步抽取到一卡通数据分析系统，然后对获得的数据利用大数据技术进行治理与分析，保证各维度数据的有效性、准确性、完整性、一致性。③借助Echa
内蒙古科技与经济 2022年18期2022-02-08
- 共享交换环境生态大数据分析系统建设方法分析
境生态大数据分析系统进行建设的过程中，明确合理规范的建设思维和方法，研究相关内容，采用针对性有效的建设方法，保证信息数据应用的完整性，对生态环境的发展提供有力的支持和保障。1 共享交换环境生态大数据分析系统建设意义1.1 增强政务信息公开透明性新时代发展背景下，政府信息公开透明是提升相关公共开展的公开透明性，最大程度的防治出现廉政腐败等问题，增强人们对政府的信任度，扩大其社会影响力，实现政府和社会大众多方面的高效协作。政府和公民是新时代法治社会建设发展工程
电子技术与软件工程 2021年11期2021-11-22
- 基于大数据的电力设备运行数据分析系统的设计研究
和推广大数据分析系统势在必行。1 应用大数据设计电力设备运行数据分析系统1.1 监测电力设备运行状态电力设备运行过程中，常会因为设备缺陷、信号干扰、不良天气等因素的影响，出现超负荷运行、跳闸等情况，为整个系统的运行埋下安全隐患，而利用大数据技术，设备运行参数得以被实时传输到监控终端，工作人员只需要对系统传回的图像进行查看和分析，就可以发现这些异常，大大提升可监测工作的灵敏度。其次，在日益激烈的竞争环境下，电力企业的发展需求也在日益高涨，通过大数据设备运行数
电子技术与软件工程 2021年16期2021-11-03
- 高炉数据分析系统的设计与应用
概述高炉数据分析系统是以实时生产数据为支撑，通过数据采集、计算、分析与数据统计来反映高炉的生产情况。2 设计开发背景目前,高炉炉况分析数据主要来自于生产监控画面的实时数据、历史趋势和每天的人工报表数据。由于监控画面显示和历史趋势的数据源存在实时性和局部性，不能反应出高炉冶炼整体情况的完整性。虽然每天的报表数据能解决这一问题，但是要从这些大量的纸质报表中进行数据提炼、分析，效率低下，且这种传统的依靠操作工日复一日的手动抄录数据存在较多缺点。2.1 手工抄录数
科学技术创新 2021年30期2021-10-25
- 基于大数据的电力企业财务数据分析系统建设
企业财务数据分析系统的层次结构按照数据处理顺序，可以将电力企业的财务大数据分析系统分为3 个层次，分别是数据存储、数据预处理以及构建动态财务共享数据分析中心。其中，数据存储能够保证数据完整保留，数据处理能够确保数据时效性，而动态数据分析体系能够充分挖掘数据价值［1］。三者合为一体，能够让大数据的价值体现得更为完整和贴切。针对来自国家电网大数据中心以及外部数据源的大数据，文章分别从源数据层面、数据存储层面、数据预处理层面以及数据分析层面分析财务数据分析系统的
中国管理信息化 2021年14期2021-09-18
- 基于关联规则的大学生体质测试健康数据分析系统设计
一个健康数据分析系统，将学生各项体质测试指标输入该系统后，系统能够以特定的健康数值，生成个体或总体的身体健康分析结果，校方据此调整实际的教学方向，增强大学生的身体素质[3].在境外，分析大学生体质测试健康数据的研究起步较早，其大多应用了数据挖掘算法后，数据分析系统逐渐向精准化、关联化发展，可高效分析大学生群体的体质健康状况[4-7]；而我国，相关数据分析系统起步较晚，文献[8]以学生体质健康测试区块链为研究对象，在"省级-地级-县级"的三级结构下，从矫正利
吉林化工学院学报 2021年7期2021-08-31
- 校园卡数据分析平台建设及运用
合校园卡数据分析系统，了解和查询个人账单，也不能通过学生消费和使用情况，让学校了解学生在校的动态，导致校园卡数据分析平台建设工作存在问题[1]。同时，学校也不能通过校园卡数据分析平台，了解学生的消费人群的分布情况，而且在直观展示学生食堂和商铺消费性系统方面缺乏时效性，进而不利于推动学生管理工作创新发展。在学生食堂就餐高峰期期间，也不能通过校园卡数据分析平台直观展示，只能采用课表时间预估的方式，了解学生校园卡使用情况[1]。另外，在校园卡数据分析平台中，不能
信息记录材料 2021年1期2021-04-04
- 基于GIS 的国土测绘数据分析系统设计
国土测绘数据分析系统存在分析残差高的缺陷，为此，基于GIS 重新设计国土测绘数据分析系统，致力于降低国土测绘数据分析残差。1 GIS 应用概述GIS 以其自身良好的空间数据表现力，实时采集地理信息[1]，并通过GIS 的运算、分类、存储等功能执行对地理信息的管理操作。通过地理信息的坐标点位，展示其独特的视觉化效果。除此之外，GIS 具备极强的空间分析能力，在对GIS 技术进行分析时，发现此项技术具有较强的空间分析能力，这项功能在实施过程中，需要由计算机网络
科学技术创新 2021年4期2021-03-06
- 基于工业互联网平台的大数据分析系统研究
平台的大数据分析系统构建新思路、构建路径。关键词：工业领域互联网平台大数据技术数据分析系统中图分类号：TP311 文献标识码：A 文章编号：1672-3791（2021）12（a）-0000-00Research on Big DataAnalysis System Based onIndustrial Internet PlatformPENG Shuzhe WANG Xu WEI Hongntao（Ningbo Chuangyuan Inf
科技资讯 2021年34期2021-02-11
- 探讨Arc GIS矿山测绘成果数据分析系统
测绘成果数据分析系统主要是针对已经获得的矿山测绘数据，根据需求进行信息的整合[1]。Arc GIS能够为矿山测绘成果数据分析系统提供丰富的数据类型自己三位数护具模型，为实现数字矿山打下基础。1 系统需求分析1.1 矿山测绘成果数据分析现状某地区具有丰富的矿产资源，当前已经开展了矿山测绘成果数据分析系统。该系统主要包括以下结构：收集矿山地表层层空间数据的地测管理信息系统；安全生产监控系统；生产管理监督系统。通过该系统，能够了解矿山的地理信息，并且实现对生产过
世界有色金属 2020年18期2020-11-30
- K高校审计数据分析系统建设方案研究
高校审计数据分析系统，一方面实现审计数据标准化快捷报送，另一方面也实现内部审计工作的转型升级。现阶段，高校的审计工作已经改变了传统的方式，将账套式改为数据式审计，传统的审计工作只能遵循原有的思路，导致工作人员面对大量的数据信息无从下手，从而出现难如登天、水中捞月的尴尬的场面。而新型数据审计方式，制定了新型的信息化方案，由互联网来辅助工作人员进行数据整理更容易理清审计思路，建立高校审计数据分析系统变得非常迫切。一、建设高校审计数据分析系统的意义高校审计覆盖财
大众投资指南 2020年30期2020-09-09
- 数据分析系统在技术方面的改进措施
的，所以数据分析系统就成为了一个重要的工具。数据分析系统的四个主要功能是配置、采集、处理和应用，并且其中包含采集数据、分析整理、构建模型等流程。这些功能看似简单，但是却能找到数据的规律，从而对某一事件的结果进行预测。这对于很多决策者来说是很具有价值的，分析的结果可以让他们获知市场的大致动向，并减少做出错误决断的情况。因此，该系统对于任何领域来说，其价值都是难以估量的。关键词：数据分析系统;技术;改进一、数据分析系统概述（一）数据分析的常用方法现在分析中一些
中国新通信 2020年1期2020-05-25
- 数据分析系统在技术方面的改进措施
法。2 数据分析系统的基本组成和运作流程2.1 系统组成框架(1)采集模块。获取样本数据是该系统运作的首要环节，采集模块可以通过人为设定关键词或数据抓取标准的方式，对数据存储空间内的海量数据进行筛选、检索，将那些符合条件的数据采集起来，并单独存放在一个独立的存储空间内，方便下一步进行深入的分析处理。(2)处理模块。按照特定的应用软件或构建数学模型等方式，对符合标准的数据进行多样化的处理。处理模块主要是进行数据转化，将一堆杂乱的数据转化为清晰、直观的图表、数
黑龙江科学 2020年2期2020-01-18
- 基于累计工作量的在线大数据分析作业调度算法
rk等大数据分析系统中无先验知识任务的高效执行问题，设计了基于累计工作量（CRW）的任务调度器CRWScheduler。该调度器根据CRW将任务在低权重队列与高权重队列间切换;在为作业分配资源时，同时考虑到作业所在的队列和其瞬时占用资源量，无需作业先验知识即显著提升系统性能。基于Apache Hadoop YARN实现了CRWScheduler原型，在28个节点的基准测试集群上的实验表明，与YARN的公平调度机制相比，作业流时间（JFT）平均降低21%，其
计算机应用 2019年8期2019-10-23
- 基于云图像处理的城市车厢和站台拥挤度的检测与研究
拥挤度;数据分析系统引言我国经济的快速发展，城市化建设工程不断加快，私家车数量逐渐增多，因而道路交通拥堵问题也日益严重，尤其是城市主要路段和商业领域交通拥堵十分严重，或许这些已经成为阻碍城市发展的重要因素。针对这一交通问题，交通数据分析系统技术显得尤为重要，这种技术利用互联网与通讯技术拥挤图像识别技术，并且在相应的电子设备上配置检测设备，从而实现对车辆息数据和人口拥挤度数据进行有效采集和分析整理[2]。此外，这种交通数据分析系统技术会及时把检测数据传输给监
科学导报·科学工程与电力 2019年28期2019-10-21
- 基于云平台的智能家电数据分析系统的应用研究
智能家电数据分析系统的概述智能家电系统的组成包含了云平台、家电产品、用户客户端，是基于物联网技术、云计算技术和大数据技术的应用。在云平台上整合了各类家电的数据分析系统，通过物联网技术，将家电运行的重要参数实时上传云端的数据分析系统。云平台系统针对接收数据进行存储，结合过去数据进行逻辑分析，即可判断当前家电的运行状态，也可以系统分析出用户使用该家电的习惯，甚至系统可以分析出用户是否满足于目前家电的功能需求，如图1。经过系统数据分析后，将一些重要的信息推送到人
日用电器 2019年7期2019-08-07
- 基于机器学习的硬件数据分析系统的实现
探测硬件数据分析系统内部各组件潜在的相互联系.1 硬件数据分析系统构架硬件数据分析系统是性能计数单元收集的性能信息的数据挖掘工具.图1给出了硬件数据分析系统的系统框架，主要由三部分组成：数据集成模块、重要排序模块和阶段关闭排序模块，具体硬件数据分析框架结构关系图如图1所示.图1 硬件数据分析框架在大数据计算框架中，数据负载运行时，硬件数据分析系统使用perf_event［2］工具批量监控性能计算单元中的性能事件，生成原始时间数据.数据集成模块对这些源数据进
通化师范学院学报 2019年8期2019-07-19
- 铁路行车组织数据分析系统的设计与实现
行车组织数据分析系统的设计结构进行总结，进而在数据提取、挖掘分析算法与实现技术相关基础上，分析和阐述铁路行车组织数据分析系统的实现技术。[关键词]铁路行车组织数据分析系统设计铁路运行是非常复杂的过程，列车运行时会受到各种因素影响。铁路行车组织是铁路运输中十分关键的构成部分，是铁路综合使用各项技术设备，对列车运行进行合理安排，以此实现乘客与货物运输的一种计划性工作。其工作内容主要有车站技术、车流组织、调度等相关方面的工作。从这些方面就可以看出，铁路行车组织是
电子技术与软件工程 2019年8期2019-07-16
- 大数据在智慧港口中的应用
港口大数据分析系统港口大数据分析系统是港口数字化管理平台的核心应用。通过访问数据库信息，可分析处理港口数据，从而有效利用港口数字化管理平台中的数据资源，为港口管理、生产提供决策信息[4]。港口大数据分析系统主要具有四个功能：（1）数据采集及数据库建立，实时采集港口日常生产产生的各种数据，按照港口调度需求，确定港口数据库结构，将采集数据即时存储到数据库中；（2）可视化管理，建立符合港口管理需要的可视化管理模型，如泊位占比、物资流向、停靠时间、任务完成情况等
通信电源技术 2019年3期2019-04-17
- 基于数据挖掘技术的应答器报文分析方法研究
答器报文数据分析系统的设计及实现5.1 应答器报文数据分析系统的功能分析应答器报文数据主要功能需求及C/S结构的基本特征，应答器报文数据分析系统界面布局如图2所示，包括系统工具栏区、报文数据显示区、解析数据显示区和日志及报警信息显示4部分。5.2 应答器报文数据分析系统软件的功能实现虽然应答器数据量大，但是其解析数据拥有结构清晰的特点，对于使用大数据分析的方法，难免大材小用，且不易于工程化的设计和实现，因此可以考虑采用小型化、轻便的数据分析工具来实现基于K
铁路通信信号工程技术 2019年1期2019-03-04
- 大数据分析平台建设与应用研究
集成化的数据分析系统从客观上来说，数据的存在都代表着客观世界当中的某种事物的轨迹。因此，各方面的数据是极其具有价值的东西。随着科技的发展，我们今天开始逐步的认识到了这些数据的重要意义。但是由于现有技术的不足，到目前为止我们还缺乏一种高度集成化的数据分析系统来与现实的数据分析平台相匹配。（五）对大数据分析平台的开发程度有待加强大数据平台的建立是为了满足人类社会发展的各种需求的。但是数据的原始状态是非常复杂甚至是杂乱无章的。这也造成了数据在开发利用上的巨大阻碍
魅力中国 2019年39期2019-01-14
- 智慧交通运行状态数据分析系统的应用研究
运行状态数据分析系统的架构智慧交通运行状态数据分析系统的整体结构如图1所示，该分析控制系统主要包括数据储存层、数据准备层、算法工具层、分析逻辑层及应用层。数据储存层主要用于汇总、储存智慧交通系统所收集到的各类的监测数据；数据准备层主要用于对系统设定的各指定数据进行专门的打包分类及初步处理；算法工具层主要用于对存储隔离在数据准备层内的各类信息按照系统设定的算法工具进行逻辑运算，转换为合成数据；分析逻辑层则用于对各合成数据和系统设定的原始控制数据进行分析对比，
机电信息 2018年27期2018-09-21
- 基于物联网的智慧电梯大数据分析系统开发
管理和大数据分析系统，实现电梯制造与安装工艺优化、维修成本降低、应急救援和维修时间缩短，电梯故障率和事故率大幅降低。1 电梯安全监测技术的现状分析由于电梯频繁启停，许多维保不到位，再加上电梯逐年“老龄化”，造成可靠性下降，进入故障多发期，屡屡有电梯故障停梯和关人困人事故发生。且故障发生时，因故障信息不能有效传达，出现电梯维修延误、电梯故障加重，导致被困人员不能得到及时解救甚至在不当自救过程中出现更大的伤害等问题。目前，电梯在安全隐患和安全监测技术上存在较多
电子制作 2018年15期2018-09-21
- 基于scrapy框架的京东数据分析系统设计与实现
京东购物数据分析系统。从而对京东商铺客户评价进行分析，获取该商品的质量优劣，可以迅速的帮助用户获取商品的很多重要信息。Abstract： The behavior analysis and prediction of customer information based on large data technology has caused more and more enterprises to pay attention to it. Accordin
价值工程 2018年28期2018-09-20
- 基于信息融合的社群金融信息数据分析系统的研究与实现
金融信息数据分析系统的应用与其在实际中存在的问题，做了简单的分析，使信息融合的社群金融信息数据系统更好的实现其价值。【关键词】信息融合 社群金融信息 数据分析系统 研究方法进入到二十一世纪以后我国的经济水平逐渐提高，经济发展的基础是依靠我国第一产业、第二产业、第三产业的发展，第一产业是农业，第二产业是工业，而第三产业是服务业，其中在第三产业中信息化技术的应用最为全面，所占比例也最大，因为科技的注入，所以在很大程度上节省了人力物力，降低了生产成本，从而就会带
时代金融 2018年15期2018-08-28
- 面向风险管理的银行大数据分析系统架构研究
的银行大数据分析系统架构目的是，基于信息资源管理的视角，通过构建覆盖数据整合、数据分析和数据应用等全流程的一体化大数据分析系统架构来提升银行的风险管理水平，真正实现精细化风险控制。2 银行风险数据分析的现状研究2.1 银行风险数据分析的内涵风险是银行在开展各类业务的过程中受各类不确定要素的影响使资产和收益出现减值的可能[ 4]。虽然银行风险管理的发展经历了传统风险管理和新型风险管理两个阶段，但两个阶段的风险管理整体流程基本一致，均包括了风险识别、风险评估、
信息资源管理学报 2018年2期2018-05-04
- 数据分析系统及其技术的改进措施
量的专业数据分析系统。数据分析系统就是通过对生产活动中所出现的数据进行分析，发现其间的数值与逻辑规律，对分析对象的决策、改进提供参考。常见的数据分析系统至少包括配置、采集、处理和应用4个层级，并包含采集数据、分析整理、提出模型、分析检验等基本流程。针对现有的数据分析系统，要想更好地改进其性能，一方面要选取更适宜的数据分析指标，使数据分析更加具有可靠性；在软件编写时，建立标准代码库与数据集市，并改进其交互性、兼容性也显得格外重要。关键词：数据分析系统；技术；
科学与财富 2018年5期2018-04-21
- 大数据分析系统创新平台与生态建设
2. 大数据分析系统国家工程实验室，北京 1001901 引言近几年，科技界和企业界甚至世界各国政府都把大数据作为发展的重点。美国政府更是把大数据看作“未来的新石油”，拥有数据的规模和运用数据的能力将成为衡量一个国家综合国力的重要组成部分，国家间和企业间对数据的占有和控制将成为新的争夺焦点。大数据分析技术是使用大数据的核心关键技术，对数据的深度分析和利用将在推动经济持续增长、提升国家和企业竞争力方面起到至关重要的作用。大数据将成为未来新的经济增长点，企业将
大数据 2018年1期2018-03-01
- 大数据对于企业管理会计的影响及对策
。若将大数据分析系统应用于该领域，可使其获得更好的发展。一、大数据对企业管理会计的影响（一）大数据对会计信息的影响财务信息是管理会计的主要分析对象，传统的管理会计理论认为，企业的经营状况可被概括为生产要素的流转，即生产要素转化为商品，商品转化为货币，货币再转化为生产要素。同时由于生产要素的构成较为复杂，因此其可通过货币进行量化统计。因此，通过分析财务报表，企业的运营情况将得以呈现。但大数据的出现，对传统理论提出了挑战。首先，大数据是指互联网中蕴藏的海量数据
现代营销(创富信息版) 2018年12期2018-02-21
- 智能数据分析系统研究及应用
业智能的数据分析系统。智能数据分析系统的存在能够为政府或者企业的工作提供重要的数据信息支持。文章在阐述智能数据分析系统设计和实现的基础上，具体分析智能数据分析系统在政务系统中的应用。【关键词】智能 数据分析系统 关联分析 聚类分析1 智能数据分析关键技术1.1 智能数据抽取工具——ODIODL作为Qracle公司的智能数据抽取工具，实现对大量数据信息的收集、转换、加载和整理，并实现多种关系型数据库的继集成操作。智能数据挖掘方法如图1所示。1.2 智能数据分
电子技术与软件工程 2017年19期2017-11-09
- 一种轻量级大数据分析系统的实现
轻量级大数据分析系统的实现解文祥江苏省海量数据技术研究所有限公司，江苏 南京 210019随着信息化进程的不断推进，大数据时代也随之到来。各个行业的发展都要依赖大数据分析，从而为商业决策提供最有价值的参考数据。然而面对庞大的数据量，从中提取有效信息的过程实属不易。大数据分析技术的出现让这一难题得到了有效解决。基于此，主要是通过一种轻量级大数据分析系统的实现，继而从复杂的大数据分析中解脱出来，使得相关领域能够从中得到启发。轻量级大数据；大数据分析；大数据分析
移动信息 2017年11期2017-04-14
- 海量冗余数据干扰下的网络数据捕获和分析系统研究
获系统；数据分析系统0 引 言随着网络技术的快速发展，网络逐渐成为人们生产和生活中的重要工具。网络安全性受到人们的普遍关注［1⁃2］。安全性是指网络信息不被泄露和破坏。网络数据包捕获和分析技术是一种基本的网络安全维护手段。建立有关网络数据捕获和分析方法对网络安全具有重要作用［3⁃5］。目前，有关网络数据捕获和分析方法取得了如下进展：李小华将TDT同步算法与滑动相关法融合完成网络数据捕获，但存在效率低、一级数据损失高的缺陷［6］；崔文明对参考信号和接收信号进
现代电子技术 2016年16期2016-08-30
- 新闻链接：惠安中学启用新校区 “好人教育”迎来大数据
人教育大数据分析系统上线发布会，在惠中博闻楼大厅隆重举行。惠中全体教师，惠中大学区成员校户县六中、电厂中学，以及户县四中、户县八中主管德育副校长、政教主任，惠中学生代表约600人参加了会议。会议由惠安中学党总支书记黄涌主持。每世英校长作了题为《好人教育大数据分析及学校文化建设体系》的报告。随后，黄涌书记就新校区搬迁启用进行动员讲话，这标志着惠安中学新校区的正式启用。惠安中学新校区建设工程全面开始于2014年，是户县人民政府2014年“十件惠民大事”之一。2
陕西教育·综合版 2016年6期2016-08-05
- 海底管线缺陷内检测技术与装备工程化研究技术总结
漏磁检测数据分析系统。该系统配合内检测器已项目中投入测试，对牵拉实验数据分析的结果验证了所提出算法的确具有优秀的量化性能。关键词：漏磁检测 缺陷分类 缺陷量化 多缺陷聚集 数据分析系统Abstract：The magnetic flux leakage（MFL） is the most generalized method for in-pipe inspection. A method of classification and quantificati
科技资讯 2016年3期2016-05-30
- 环境监测数据分析系统的研究
环境监测数据分析系统的研究崔旭（梨树县环境监测站吉林四平136500）环境检测是环境保护工作的重要组成部分，同时了解一个地区环境变化的重要手段。环境监测涉及常规监测和污染源检测等不同类型的监测项目，监测数据也非常巨大，对于监测数据的分析对于环境监测工作意义重大。本文从环境监测数据分析系统搭建的意义和功能入手，研究当前环境监测数据分析系统在线的时期能够运用哪些重要的技术手段。环境监测；数据分析；系统1 引言环境监测数据分析系统是环境信息系统不可或缺的一部分，
资源节约与环保 2016年10期2016-02-07
- 把脉世界杯热点
M社交大数据分析系统的深度挖掘，腾讯得以把握世界杯期间每个阶段的热点。2014年巴西世界杯已经渐渐离我们远去了，但中国球迷仍然在社交媒体上谈论着各种感兴趣的话题。虽然中国队没能参加本届世界杯，但是这似乎丝毫没有影响中国球迷的热情——他们通过社交平台和工具发出自己的声音。7月7日，腾讯曾经根据中国球迷支持率公布了一份本届世界杯四强名单。现在看来，这份名单让我们感到十分吃惊，因为它竟然与本届世界杯最后的比赛结果完全吻合：德国队获得冠军，阿根廷队是亚军，荷兰队是
中国计算机报 2014年28期2014-08-21
- 税源专业化管理模式下数据分析系统的应用研究
理模式下数据分析系统的应用研究◆王一民数据分析技术在信息化管理的决策中发挥着越来越重要的作用。文章分析了当前税源专业化管理中的数据分析系统功能、作用，剖析了应用过程中的成效和存在的问题，提出了完善税源专业化管理应用中数据分析系统的对策。税源管理；数据分析；信息管税一、涉税数据分析系统的概况（一）当代数据分析技术对税收信息化建设的影响我国税收信息化建设作为现代税收征管体系中的重要方面，从上世纪八十年代初起步至今，经历了从小到大、从简单到复杂、从自行开发到统一
税收经济研究 2014年3期2014-04-09
- 进口矿产品检测数据分析系统的研究与应用
产品检测数据分析系统，有效整合、利用了全国各口岸进口矿产品的检验检疫信息，并动态收集进口矿产品检验数据，既能为上级部门的宏观决策提供技术支持，又能为检验检疫质量把关及海关监管提供辅助手段，还可为国内企业的贸易采购提供技术咨询服务。数据分析系统采用边开发、边应用、边维护、边输出成果的设计理念，以此良性循环不断完善进口矿产品信息。2 进口矿产品检测数据分析系统的研究2.1 进口矿产品检测体系的研究为确保进口矿产品质量，防止其中有毒有害物质对环境和人们身体健康造
质量安全与检验检测 2013年6期2013-01-12
- 基于SQL Server的GSM-R网络质量数据分析系统
网络质量数据分析系统（以下简称数据分析系统）是用于检测无线服务器、分析通用分组无线服务业务（GPRS）服务器及交换服务器的工作情况和计算服务器的各个网络性能指标。根据指标的多变性，使用自定义公式设计满足指标的不确定性。目前，北京核心网有移动业务交换中心（M SC）、业务控制点（SCP）的话务统计分析系统，青藏铁路也有自己的网络质量监测数据分析系统，全路其他GSM-R核心网均无统计分析软件，无法掌握网络的性能，使GSM-R网络优化暂时处于空白。2 系统设计2
铁路技术创新 2011年2期2011-12-31