数据实时性论文-马啸

数据实时性论文-马啸

导读:本文包含了数据实时性论文开题报告文献综述及选题提纲参考文献,主要关键词:Zynq,数据采集,实时,Preempt-RT

数据实时性论文文献综述

马啸[1](2019)在《基于Zynq平台的Linux实时性研究及在数据采集中的应用》一文中研究指出数据采集技术有很多有应用场景,例如无线传感器网络、无人驾驶、智能机器人以及粒子加速器等应用领域。传统的基于计算机的数据采集系统由于数据采集模块完全受限于计算机的扩展接口类型,可扩展性不强。另外,高性能的外置数据采集模块体积过大、功耗高并且价格昂贵。传统的基于嵌入式的数据采集系统由于嵌入式系统的硬件设计一旦固定便不可修改,在需求变化时便不能继续使用。鉴于传统的数据采集系统在可扩展性、体积、功耗以及灵活性等方面存在问题,本文设计基于Zynq7000SoC平台的数据采集系统。Zynq7000SoC由CPU和FPGA组合而成。Zynq7000SoC平台更加智能、更加安全,能够满足差异化需求,并且在性能、功耗和集成度等方面有出色表现。由于Linux操作系统具有可移植、开源、多用户、稳定、安全等特征,因此它被广泛用作于嵌入式操作系统内核。本文设计的基于Zynq平台的数据采集系统也选择Linux作为操作系统。在硬件选定的情况下,可对Linux内核进行实时化。本文采用Preempt-RT实时抢占补丁的方法来实时化Linux。本文的主要工作包括:1.研究数据采集系统中Linux内核无法满足硬实时的原因,给出了使用Preempt-RT对Linux实时化的方法,分析了Preempt-RT的原理。2.对基于Zynq平台的数据采集系统进行了设计和实现。3.使用测试工具对实时Linux内核和原Linux内核进行测试,分析二者差异。编写数据采集应用程序,对数据采集功能进行测试。本文给出了一种数据采集系统的总体设计框架,设计了相关设备驱动和用户应用程序并且对Zynq平台上Linux内核进行实时化。通过对比测试表明,本文设计的数据采集系统的实时性得到加强。(本文来源于《兰州大学》期刊2019-05-01)

方威,胡晓勤[2](2019)在《电力大数据平台中HBase的实时性优化方案》一文中研究指出近年来,随着大数据场景的兴起,RDBMS由于其自身的扩展性和可用性限制无法满足企业需求。No SQL数据库的出现弥补了传统关系型数据库在大数据领域的不足。No SQL数据库本身具有良好的扩展性、容错性以及实时访问、存储TB级别数据的特点。HBase就是以HDFS和MapReduce为基础的开源No SQL型分布式数据库,它不支持二级索引、事务和批量数据处理时延长等~([1])。本文以HBase和Spark为基础,增加插件使HBase支持SQL语句和二级索引,通过修改Spark源码,提升对HBase数据的本地化计算级别。插件对HBase无侵入、低耦合,支持用户输入SQL语句,把输入字段转化为HBase的列族和列限定符,根据不同的场景选取不同的执行方案。MapReduce计算框架具有计算效率低,无法利用HBase的读写缓存的缺陷~([1]),原始Spark框架不能感知HBase数据分片。本文改进Spark能感知HBase数据分片,对HBase中数据进行高级别本地化计算。最终,将本文设计的系统与业内常用的Hive+HBase方案对比常用SQL消耗的时延~([3])。通过实验得出,本文构建的优化方案在没有缺失HBase的优良特性的基础上加强了部分应用场景的实时性。(本文来源于《数据通信》期刊2019年01期)

杨萌,宿俊海,李海旺[3](2019)在《试验数据采集系统的信号实时性分析》一文中研究指出试验数据采集系统是专用仪控系统之一,主要在核电厂调试、运行和维修中,为其他系统提供监视、记录和分析手段以及相关的瞬态和故障录波功能。本文从试验数据采集系统的功能要求出发,结合不同平台试验数据采集系统设计,分析了目前核电设计中典型的实施方案,以及各实施方案在信号实时性方面的优缺点,为后续电站该系统的设计提供了指导作用。(本文来源于《仪器仪表用户》期刊2019年03期)

陈抗[4](2018)在《实时性决定数据的价值》一文中研究指出大数据等同于水库,那么存在水库里的水就是批式大数据,而随时流进水库的水就是流式大数据。大数据实时智能处理技术是数据驱动和发展数字经济的一个重要引擎。从11月5日出世以来,科创板还没有任何具体的消息,却被炒得沸沸扬扬。这个针对科技创新公司上市的板块,相比创业板更注重成长性以及科技创新能力。机构普遍认为,互联网金融、新能源汽车、人工智能、云服务、大健康、大数据等市值10亿美元以上的科技创新行业的部分公司或许成为上交所科创板的标的。可以看到,政策和资本市场对企业创新的助力越来越多,科技和商业的共生共存变得更加紧密。我们该怎么看科技和商业的结合,企业要如(本文来源于《经理人》期刊2018年12期)

宋志刚,蔡伟周,李剑波,胡阳[5](2018)在《提高分布式数据采集及监控软件实时性的方法》一文中研究指出分析了分布式数据采集及监控软件应用中所面临的实时性下降问题,提出了能够有效提高系统实时性的方法,并在实际应用中取得较好效果。(本文来源于《机电工程技术》期刊2018年02期)

徐键[6](2016)在《协同过滤中数据稀疏问题与推荐实时性的研究》一文中研究指出数据爆炸的现今使得推荐系统技术变得越来越热门,越来越重要,几乎所有的电子商务网站以及部分门户网站,甚至是搜索引擎都有推荐系统相关技术的身影。总结其中的原因,一是在唾手可得的海量信息里,人们所期望获得的却是其中极小的一部分;二是人们期望获得的信息里有一些潜在的偏好,利用这些偏好可以做更多的事情。推荐系统的发展非常迅速,它分为协同过滤,基于知识的推荐,混合推荐等等,而各种类别的推荐算法下又有很多成熟的技术。协同过滤一直是这其中的研究最多的技术,同时也是在电子商务有着广泛应用的技术之一。典型的协同过滤,通过维护一个评分者—物品评分矩阵,计算相似度确定近邻来产生推荐。不幸的是,这种算法的性能随着用户和商品的增加会产生很多问题:高维度,高稀疏度。此二者对于该技术在电子商务网站的应用产生巨大挑战。本文着眼于此,提出或改进了若干方法,以解决数据稀疏问题和推荐实时性。对于数据稀疏问题,主要对外部信息做适当提取,计算其Jaccard相似度产生预测值,并将预测值有节制地填充至测试集,以此来提高传统推荐技术的准确性。具体的,评分外的信息,如:用户的年龄、职业,物品的类别等,通过Jaccard相似度做初步调整,再与经典协同过滤得到的最近邻相似性进行加权,通过多组具体的实验,确定了较为理想的权重系数。在这样权重下,我们得到的结果相对基准实验有了一些提高。对于实时性的解决,我们引入聚类中的簇代表点技术(CURE,Clustering Using Representatives),主要是将搜寻所有用户空间问题转变为搜索簇代表点的集合中的近邻问题,从而减少了近邻搜寻空间的规模,以提高实时性。解决这一问题的关键,亦或是本文的核心工作,在于簇代表点的计算上。通过对前人所提算法的研究,我们进行了适当的修改,通过平行实验对比,我们修改的算法得到的最终结果相对较好。(本文来源于《兰州大学》期刊2016-04-01)

李顺琴,何娇,沈昕[7](2015)在《强实时性流媒体数据保密方案设计》一文中研究指出由于网络视频服务的广泛应用,强实时性流媒体数据的安全性成为现今的研究热点。本文分别从保证视频数据本身的安全性和保证传输过程的安全性出发,提出了一套完整合理的强实时性流媒体数据保密方案。首先基于利用Logistic映射和Chebyshev映射形成的交叉混沌序列提出了MPEG视频流的选择加密算法,并给出实验结果和相关性能分析。然后选择合适的网络传输协议,并对于数据包丢失所引起的解密错误扩散问题提出了相应的解决方法。最后给出了完整方案设计图。(本文来源于《电脑知识与技术》期刊2015年22期)

宋亚楠[8](2015)在《无线传感器网络数据实时性技术研究与应用》一文中研究指出无线传感器网络(WSN)中的实时性场景经常出现,如火灾预警、抢险救援、关键目标跟踪等。这些应用对于数据实时性的要求很高,希望数据能在传输时限内到达监控中心,这样用户可以做出实时分析并及时采取措施。而根据目前国内外的研究与个人对影响WSN数据实时性因素的分析,得出主要因素是传输过程中的时间延迟,其中路由协议的好坏会直接影响数据的传输时延,成为人们衡量实时性的一个关键因素。本文主要针对无线传感器网络中具有实时性的路由协议进行研究,设计了一种基于实时性约束的分簇路由协议,主要从分簇算法、簇首的队列管理和簇首间的路由选择叁部分进行改进。分簇算法在LEACH算法基础上进行改进,其中簇首选举阶段引入剩余能量相关因子进行优化,稳定传输阶段引入多优先级混合通信策略并且对TDMA时隙分配机制进行改进。簇首的队列管理采用基于优先级的调度策略进行数据包的调度。簇首间的路由选择根据传输速率和数据包的优先级,选择最优的下一跳节点,尽量减少每一跳的传输时延。通过仿真验证CRPRTC算法比LEACH算法的平均传输延时要小,CRPRTC算法的重要数据节点的传输延时明显小于一般节点,优先级越高的数据包的传输时延越小,并且节点的能耗相对较少,一定程度上延长了网络的生命周期。本文在路由协议的基础上设计了一种实现实时数据采集与应用的系统,提出系统模型与框架,主要实现Android移动终端实时数据应用部分。从后台数据库设计、Web Service实现与查询优化等方面进行优化设计,最终在Android终端实现了实时数据显示。(本文来源于《北方工业大学》期刊2015-06-30)

高思远,王延东,张宏巍[9](2015)在《无人机载数据记录仪软件的实时性分析与优化》一文中研究指出为了给飞行安全、维护管理以及训练提供重要数据保障,设计了无人机载数据记录仪,对该记录仪软件的实时性进行了研究。对影响数据记录仪软件实时性的因素进行分析,根据所需记录数据的帧长度及中断频率得到数据记录仪对中断响应延时的要求;利用软件设置GPO(General Purpose Output)翻转,结合示波器测得存储单元在不同寻址方式下的响应时间延时;再根据寻址响应延时及乒乓缓存深度关系得到最优记录模式。通过搭建测试平台对优化前后的数据记录仪软件进行测试。结果表明,优化后的数据记录仪最短中断响应时间间隔为56μs。该数据记录仪能实时记录所有中断源数据,丢帧率为0,满足无人机对数据记录仪的高实时性要求。(本文来源于《吉林大学学报(信息科学版)》期刊2015年03期)

朱俊,李芳,王丽芳[10](2014)在《多功能车辆总线非周期数据实时性分析与带宽分配的优化设计》一文中研究指出在分析MVB数据传输机制的基础上,提出了非周期数据通信的优化带宽分配策略,推导出了相应的带宽分配策略的计算公式,并在实例中对优化后的策略进行了分析研究和性能比较。对带宽分配方法进行优化后,非周期数据通信的实时性有比较明显的提高。(本文来源于《机车电传动》期刊2014年03期)

数据实时性论文开题报告

(1)论文研究背景及目的

此处内容要求:

首先简单简介论文所研究问题的基本概念和背景,再而简单明了地指出论文所要研究解决的具体问题,并提出你的论文准备的观点或解决方法。

写法范例:

近年来,随着大数据场景的兴起,RDBMS由于其自身的扩展性和可用性限制无法满足企业需求。No SQL数据库的出现弥补了传统关系型数据库在大数据领域的不足。No SQL数据库本身具有良好的扩展性、容错性以及实时访问、存储TB级别数据的特点。HBase就是以HDFS和MapReduce为基础的开源No SQL型分布式数据库,它不支持二级索引、事务和批量数据处理时延长等~([1])。本文以HBase和Spark为基础,增加插件使HBase支持SQL语句和二级索引,通过修改Spark源码,提升对HBase数据的本地化计算级别。插件对HBase无侵入、低耦合,支持用户输入SQL语句,把输入字段转化为HBase的列族和列限定符,根据不同的场景选取不同的执行方案。MapReduce计算框架具有计算效率低,无法利用HBase的读写缓存的缺陷~([1]),原始Spark框架不能感知HBase数据分片。本文改进Spark能感知HBase数据分片,对HBase中数据进行高级别本地化计算。最终,将本文设计的系统与业内常用的Hive+HBase方案对比常用SQL消耗的时延~([3])。通过实验得出,本文构建的优化方案在没有缺失HBase的优良特性的基础上加强了部分应用场景的实时性。

(2)本文研究方法

调查法:该方法是有目的、有系统的搜集有关研究对象的具体信息。

观察法:用自己的感官和辅助工具直接观察研究对象从而得到有关信息。

实验法:通过主支变革、控制研究对象来发现与确认事物间的因果关系。

文献研究法:通过调查文献来获得资料,从而全面的、正确的了解掌握研究方法。

实证研究法:依据现有的科学理论和实践的需要提出设计。

定性分析法:对研究对象进行“质”的方面的研究,这个方法需要计算的数据较少。

定量分析法:通过具体的数字,使人们对研究对象的认识进一步精确化。

跨学科研究法:运用多学科的理论、方法和成果从整体上对某一课题进行研究。

功能分析法:这是社会科学用来分析社会现象的一种方法,从某一功能出发研究多个方面的影响。

模拟法:通过创设一个与原型相似的模型来间接研究原型某种特性的一种形容方法。

数据实时性论文参考文献

[1].马啸.基于Zynq平台的Linux实时性研究及在数据采集中的应用[D].兰州大学.2019

[2].方威,胡晓勤.电力大数据平台中HBase的实时性优化方案[J].数据通信.2019

[3].杨萌,宿俊海,李海旺.试验数据采集系统的信号实时性分析[J].仪器仪表用户.2019

[4].陈抗.实时性决定数据的价值[J].经理人.2018

[5].宋志刚,蔡伟周,李剑波,胡阳.提高分布式数据采集及监控软件实时性的方法[J].机电工程技术.2018

[6].徐键.协同过滤中数据稀疏问题与推荐实时性的研究[D].兰州大学.2016

[7].李顺琴,何娇,沈昕.强实时性流媒体数据保密方案设计[J].电脑知识与技术.2015

[8].宋亚楠.无线传感器网络数据实时性技术研究与应用[D].北方工业大学.2015

[9].高思远,王延东,张宏巍.无人机载数据记录仪软件的实时性分析与优化[J].吉林大学学报(信息科学版).2015

[10].朱俊,李芳,王丽芳.多功能车辆总线非周期数据实时性分析与带宽分配的优化设计[J].机车电传动.2014

标签:;  ;  ;  ;  

数据实时性论文-马啸
下载Doc文档

猜你喜欢