统一检索系统论文-郑荣

统一检索系统论文-郑荣

导读:本文包含了统一检索系统论文开题报告文献综述及选题提纲参考文献,主要关键词:日志系统,Thrift,框架,Scribe,服务,Log4j2

统一检索系统论文文献综述

郑荣[1](2018)在《统一日志系统中的日志获取模块与日志检索模块的设计与实现》一文中研究指出随着智能便携设备的不断普及以及网络服务质量的不断提升,互联网产品的用户数量以及网络流量与日俱增,应用服务的高可用、高性能越来越被重视。日志作为记录应用程序运行时信息的组件,在应用程序的监控、问题排查、服务优化等工作中发挥着不可替代的作用。美团点评开发了统一日志系统,旨在为公司的分布式应用提供更好的日志服务,系统以磁盘文件收集方式或socket收集方式获取满足格式规范的日志数据,并将数据发送至本机代理,本机代理将原始日志按照日志类别发送到Kafka集群对应的topic中。实时日志解析任务消费Kafka中的原始日志并且对日志进行解析,将原始文本格式的日志解析成JSON格式的数据,提取出错误日志并按照日志类别将错误日志发送到Kafka集群中对应的topic中,供异常监控系统使用。同时,日志传输作业会实时消费Kafka中JSON格式的日志,并将数据发送到ElasticSearch集群中,按照索引分片策略对数据进行分片存储。ElasticSearch中存储的数据可被用于Kibana的可视化展示以及日志中心的日志检索。本论文的主要工作包括统一日志系统中的日志获取(socket收集方式)模块以及日志检索模块的设计与实现。其中,日志获取模块是利用Log4j2的插件化编程方式,实现了格式转换插件MTDPPatternConverter、日志格式化插件LcLayout以及日志输出插件ScribeAppender。同时,为了能将数据发送至本机日志代理的Scribe服务,日志获取模块还实现了 Scribe服务对应的Thrift客户端,用于数据传输。在ScribeAppender进行日志输出时,首先对日志数据进行格式化操作,然后使用Thrift客户端将日志发送至下游Scribe服务器。日志检索模块的主要工作是对存储于ElasticSearch中的日志进行检索,并对日志中心前端提供日志检索的RESTful接口。日志检索模块包括service层与web层,service层调用ElasticSearch提供的数据操作的RESTful接口进行数据检索,并向web层提供服务,web层对日志中心前端提供日志检索服务。(本文来源于《南京大学》期刊2018-05-01)

毛立夏,张喜瑞[2](2015)在《数字图书馆中统一检索系统的研究》一文中研究指出数字图书馆的各种数字文献资源数量庞大,不同公司的数字文献数据库的结构和检索方式各异。随着数字图书馆建设的快速推进和发展,统一检索技术的研究和建设者正日益成为数字图书馆研究的热点。本文详细介绍了作者用VS.NET及Web Service开发的《统一检索系统》的过程,包括实现该系统平台的技术架构,检索语法及其转换方法,平台采用的缓存模型,检索结果的整理及输出等功能的实现过程。(本文来源于《通讯世界》期刊2015年16期)

冯红娟,张文静,梁蕙玮[3](2014)在《中文古籍资源统一检索系统初探》一文中研究指出通过对古籍书目数据库和古籍全文数据库的调查分析、比较研究,分析目前中文古籍数据库的建设现状及存在的问题,提出中文古籍统一检索系统建设的设想,并对其未来进行展望。(本文来源于《图书馆学刊》期刊2014年10期)

张宏伟,齐明明,史磊,李杨[4](2014)在《基于元数据仓储的统一检索系统研究》一文中研究指出基于元数据仓储平台建设,对图书馆内部来源不同的数字资源进行数据整合,实现多数据源的元数据本地化采集、存储和管理。利用统一检索引擎进行检索分发,在各元数据库中进行检索,对检索结果进行合并、排序和动态分类,并以统一的格式将检索结果返回给用户。(本文来源于《图书馆学刊》期刊2014年09期)

赵垠兰[5](2014)在《基于xPlore的统一资源检索系统的设计与实现》一文中研究指出随着经济的高速发展,市场竞争日益激烈。企业经过多年的运行积累,存储了海量的信息资源。由于信息资源管理分散、共享困难,形成彼此隔离的信息孤岛。如何快速的获取信息资源尤其是大量的、非结构化数据信息,是当前企业界面临的巨大挑战。基于xPlore的统一资源检索系统(AlOS)是针对无法统一检索与本公司产品相关的信息和资源的现状提出的。公司业务模型以出售技术支持为主,软件为辅。它每天接受数以万计的客户请求,随着公司规模的扩大,处理效率越来越低,导致了研发人手紧缺,成本急剧上升。事实上,大部分请求是类似的,而请求对应于产品的各个不同版本,统一检索的缺失,我们无法快速定位产品的资源,严重影响了研发人员的工作效率,同时也提高了Bug定位的难度。AlOS基于全文检索平台xPlore,将产品相关的代码、文档和报告等内容收集管理,实现资源整合与信息检索。本文的工作主要包括:(1) 总结了统一资源检索在企业中的重要性以及本系统的项目背景。(2)设计并实现了一个基于xPlore的统一资源检索平台AlOS,它通过收集各大信息源中包含目标产品的信息并对资源进行索引与存储,同时实现了相似文章推荐功能,信息源包括P4版本管理服务器的项目代码、EMC Powerlink产品说明文档、EMC在线支持网站Support Note与产品相关的网页、EDN内部资源管理网站与产品相关的网页和基于主题的产品说明文档Dita。(3)将AlOS系统运用于实际的软件开发与维护中,大大方便了开发人员与技术服务人员,他们可以快速获得所需信息,减少了开发与维护时间,节约成本。本文的要旨是设计并实现一个能解决企业内部资源无法统一获取问题的系统,即AIOS。在本项目的开发过程中,进一步验证了xPlore在企业中应用的普遍性。(本文来源于《南京大学》期刊2014-05-01)

刘莉,朱丹浩[6](2014)在《公安信息资源整合中的统一检索自动加权系统研究》一文中研究指出统一检索平台对异构数据源进行了整合,减轻了用户检索的负担和获取知识的难度。但检索规模的扩大也伴随着新的问题,用户更难从反馈的结果中找到最满足需求的数据结果。本文基于超参数的统计概率机器学习模型,面向用户的个性化需求,建立了自动加权系统。该系统具有参数量小、运算快、实时性和松耦合等优点,据此,本文依托公安科技信息资源整合和服务平台,实现了资源来源特征模型和资源学科特征模型,并论证了新系统在查准度、查全度和醒目度指标上的优越性。(本文来源于《江苏警官学院学报》期刊2014年02期)

宿大东[7](2013)在《搜索引擎在构建图书馆网站统一检索系统中的应用》一文中研究指出采用开源软件Nutch和elasticsearch搭建了一个网站统一检索原型系统,用于解决图书馆门户网站建设过程中遇到的跨站点统一检索问题,并描述了具体的实施细节,在网络信息采集和检索应用方面具有一定的参考意义。(本文来源于《科技情报开发与经济》期刊2013年21期)

姜莹莹[8](2013)在《基于OneSearch统一检索系统的统一检索平台评价》一文中研究指出文章从用户使用的角度,通过参考前人对一般学术资源检索系统或整合检索平台评价标准的研究,对OneSearch统检索系统平台从资源整合功能、检索功能、检索结果处理、检索效率及服务功能5方面进行评价。(本文来源于《无线互联科技》期刊2013年08期)

傅立新[9](2013)在《数字图书馆统一检索系统功能与设计研究》一文中研究指出国内外数字图书馆统一检索系统各有特点,通过对数字资源检索需求进行分析,设计统一检索过程模型,建立统一的功能体系框架结构,同时应该遵循国际的软件系统开发标准,与图书馆各系统之间无缝链接。(本文来源于《科技视界》期刊2013年22期)

武海东[10](2013)在《基于信息系统成功模型的数字资源统一检索系统评价》一文中研究指出以信息系统成功模型为基础,纳入自我效能与主观规范两项社会/个人因素,探讨影响数字图书数字资源统一检索系统的使用、满意度与绩效的可能因素。借鉴信息系统成功模型相关文献中的题项,对217名受访读者进行调查研究。自我效能与主观规范会影响使用者使用数字资源统一检索系统。系统品质、服务品质、内容品质、自我效能与主观规范,对于使用者满意度均有直接正向的影响,并且经由数字资源统一检索系统能提升学习成绩与学术研究。(本文来源于《情报杂志》期刊2013年04期)

统一检索系统论文开题报告

(1)论文研究背景及目的

此处内容要求:

首先简单简介论文所研究问题的基本概念和背景,再而简单明了地指出论文所要研究解决的具体问题,并提出你的论文准备的观点或解决方法。

写法范例:

数字图书馆的各种数字文献资源数量庞大,不同公司的数字文献数据库的结构和检索方式各异。随着数字图书馆建设的快速推进和发展,统一检索技术的研究和建设者正日益成为数字图书馆研究的热点。本文详细介绍了作者用VS.NET及Web Service开发的《统一检索系统》的过程,包括实现该系统平台的技术架构,检索语法及其转换方法,平台采用的缓存模型,检索结果的整理及输出等功能的实现过程。

(2)本文研究方法

调查法:该方法是有目的、有系统的搜集有关研究对象的具体信息。

观察法:用自己的感官和辅助工具直接观察研究对象从而得到有关信息。

实验法:通过主支变革、控制研究对象来发现与确认事物间的因果关系。

文献研究法:通过调查文献来获得资料,从而全面的、正确的了解掌握研究方法。

实证研究法:依据现有的科学理论和实践的需要提出设计。

定性分析法:对研究对象进行“质”的方面的研究,这个方法需要计算的数据较少。

定量分析法:通过具体的数字,使人们对研究对象的认识进一步精确化。

跨学科研究法:运用多学科的理论、方法和成果从整体上对某一课题进行研究。

功能分析法:这是社会科学用来分析社会现象的一种方法,从某一功能出发研究多个方面的影响。

模拟法:通过创设一个与原型相似的模型来间接研究原型某种特性的一种形容方法。

统一检索系统论文参考文献

[1].郑荣.统一日志系统中的日志获取模块与日志检索模块的设计与实现[D].南京大学.2018

[2].毛立夏,张喜瑞.数字图书馆中统一检索系统的研究[J].通讯世界.2015

[3].冯红娟,张文静,梁蕙玮.中文古籍资源统一检索系统初探[J].图书馆学刊.2014

[4].张宏伟,齐明明,史磊,李杨.基于元数据仓储的统一检索系统研究[J].图书馆学刊.2014

[5].赵垠兰.基于xPlore的统一资源检索系统的设计与实现[D].南京大学.2014

[6].刘莉,朱丹浩.公安信息资源整合中的统一检索自动加权系统研究[J].江苏警官学院学报.2014

[7].宿大东.搜索引擎在构建图书馆网站统一检索系统中的应用[J].科技情报开发与经济.2013

[8].姜莹莹.基于OneSearch统一检索系统的统一检索平台评价[J].无线互联科技.2013

[9].傅立新.数字图书馆统一检索系统功能与设计研究[J].科技视界.2013

[10].武海东.基于信息系统成功模型的数字资源统一检索系统评价[J].情报杂志.2013

标签:;  ;  ;  ;  ;  ;  

统一检索系统论文-郑荣
下载Doc文档

猜你喜欢