Hadoop框架相关论文
基于Hadoop开发的海量数据存储平台优势显著,使用者无需掌握架构底层的搭建细节,只需根据应用层的功能指引便可以开展分布式程序的......
针对海量工业大数据的多源异构性特征,提出一种基于优化深度置信网络的大数据清洗算法。在Hadoop框架下,利用曼哈顿距离描述高维空......
介绍了MapReduce编程框架产生的背景,研究了Hadoop MapReduce的架构和工作过程,给出了MapReduce的优缺点,并指出了下一步发展的方......
围绕绿色交通、节能减排,提升城市公共交通的管理水平,需要加强城市公交的信息化管控手段.城市公交车辆行驶线路数据管理是城市公......
本文利用Hadoop框架设计了一种智慧旅游资源的存储平台。旅游资源数据存储平台总体分为四层：用户层、业务服务层、存储管理层和物理......
随着社会经济的快速发展,大型购物中心每天产生的数据量非常庞大,而且数据格式非常不规范,时间久了,这些数据管理起来非常麻烦。但......
在大数据时代,不同地区、不同院校都会根据自己的教学特点独立制作相应的课程教学资源,相应的数据量增长极快。后疫情时代,越来越......
在新冠肺炎疫情的影响下,大学生就业已经成为受到广泛关注的社会热点问题。在疫情的冲击下,大学生就业市场的供需两端受到一定影响......
本论文针对农技推广过程中的海量数据处理问题，提出了云计算的解决办法，介绍了云计算在其他领域的应用情况。然后利用开源的Hadoop框......
外观专利图片包含着丰富的视觉信息,但是由于数量巨大,检索范围很大,若只靠人工识别,工作量非常大而且效率很低。然而,图像检索是......
大数据是最近一年来非常火热的概念，随着人类产生和收集的数据量的爆炸式增长，对数据的存储和分析能力有了更高的要求。建设基于数据......
近年来，数据呈现爆炸式增长，我们已全面进入大数据时代。大数据技术也应运而生，其中的典型代表为Apache的Hadoop开源项目，这对传统文件......
近年来，随着信息化与数字化的发展，广告业也有了天翻地覆的变化。而随着互联网的愈发普及，网络广告已经成为了广告业中的重要主体。通......
在互联网信息急剧增长的今天，搜索引擎已经成为人们从互联网上检索信息的重要工具。但是，随着行业细化不断深入，不同专业领域的搜索需......
随着信息时代的到来，互联网上的信息爆发式的增长，我们日常使用的搜索引擎需要检索的内容信息量也随着迅速增加。整个世界的信息数据......
近年来离散制造企业高度重视信息化的建设,经过几年的发展,已初具成效。在几年的业务发展中,企业内产生了大量的信息化数据,包括办......
随着互联网规模的日益增大,需要处理与存储的数据量也越来越多,云计算已经成为一种典型的解决方案。目前,云计算已经受到学术界与......
随着信息化技术在钻井行业的应用,钻井工程数据呈现指数级增长方式,海量的钻井工程数据的存储、分析及利用成为当前钻井工程行业的......
随着计算机网络的发展，应用的不断深入，云计算被提出，并成为当今计算机领域最热的研究领域之一。Hadoop是一种云计算框架，适用于大规模......
随着互联网应用的发展,各大IT公司纷纷推出自己的云计算平台,并把云计算作为未来重要的发展战略之一。伴随着数据量的爆炸式增长,......
频繁模式挖掘是数据挖掘领域的重要算法。频繁模式挖掘在事务数据库、时间序列数据库和许多其他类型数据库的挖掘研究中都得到了广......
摘要：随着计算机和互联网技术的快速发展,使得云计算技术应运而生。由于海量数据已经不能够存储在单一的计算机上,传统的串行处理需......
针对海量的配网数据挖掘需求,提出一种基于Hadoop的海量运维数据存储与分析方法。在该方法中,采用Hadoop对运维数据进行存储;然后......
为实现城市生活街道环境的合理规划,减少不必要的空间资源浪费,设计基于虚拟地理信息的城市生活街道空间测度系统。按照Hadoop框架......
“智能交通”和“社交网络”越来越普及,然而如何处理这些领域背后复杂图结构的问题迫在眉睫。比如,在“智能交通”中,如何计算两......
摘 要：针对易制毒化学品数据的海量增长问题，如何对这些数据进行分析，进而为易制毒化学品交易提供参考，是当前思考的重点。对此基于易......
数字图书馆的出现给人们生活带来了极大的改善,它将图书信息进行数字化存储于计算机中,通过计算机网络进行传播,使得图书信息资源......
针对传统的故障诊断方式已经不能满足风电故障系统实时性、准确性的要求,提出了基于Hadoop框架,并结合粗糙集属性约简以及Apriori......
为了解决地质测绘工作中所产生的海量数据,运用我国的大数据技术,建议构建基于Hadoop架构的地质测绘管理系统。为了该系统的作用能......
针对Hadoop框架下的用户行为大数据挖掘效率问题,提出了一种改进的关联规则Apriori挖掘算法。该算法首先实现了Hadoop框架下的项集......
针对云计算环境下很难确定出有助于实现良好性能的Hadoop参数集的问题,设计了一种MapReduce模拟器.首先,对Hadoop的各种参数进行建......
随着信息技术的飞速发展,大量应用程序的执行产生了跨越千兆级门槛的数据,因此增加了对数据的处理和分析能力的要求.本文在对Hadoo......
摘要：随着当前科学技术的发展，我国各行业的发展进入了大数据时代，这就为数据挖掘算法创造了条件。在大数据环境下，为了使数据挖掘的速......
文章首先对Hadoop框架及其优势进行简要阐述,在此基础上对Hadoop框架在电力大数据平台中的运用进行论述。期望通过本文的研究能够......
互联网技术的发展,使得用户对于数据的存储和管理的方式有了越来越高的要求。云存储技术的日渐成熟,对于这个问题也有了更优的解决......
大数据是信息社会发展到一定程度的必然产物,数字档案馆在大数据到来之际面临着艰巨挑战,本文分别从数字档案的接收、存储和信息挖......
为了高效快速的开发和使用Hadoop远程通信功能,对Hadoop远程过程调用（Remote Procedure Call,RPC）机制进行分析,提出独立调用Hadoop ......
‘#赢i蠢囊!”蛰哪’:菇、籍旌翳鬻鬻孽攀繁震誊鬻藜囊i燃黼蒸《瓣≮舔黼媾鬻戮蠢器搿黼搿群∞ij;.I.._iⅥ.^鲤l黼麟鬻鬻m黼薹需麓......
Hadoop是大数据处理的基础框架,负载均衡策略的优劣对Hadoop集群的处理性能有着非常重要影响。现有调度算法的一个基本假设是每个......
目前绵阳市共建设超过700个公路卡口,每天的过车记录数据信息超过600万条,并伴随有大量的图片和视频数据信息。但是随着更多新建的......
将传统的并行DBMS技术应用到Hadoop框架，在此基础上将面向列的数据库存储技术引入Hadoop的复制和调度机制，进而获得高效的编程模型与......
本文首先对大数据平台以及HadoopSg-架的概念和特点进行了介绍，然后依次对Hadoop架构核心、技术优点进行了阐述，最后对通信系统话单......
针对视频数据非结构化和体量大的特点,提出了一种基于Hadoop并发处理框架下的分片解码处理方法。该框架采用FFmpeg作为视频解码器,......
针对传统的面向终端的粗粒度流量控制方法易引起数据中心网络拥塞问题,将软件定义网络（SDN）引入大数据应用体系架构,提出了基于SDN的......
随着大数据处理技术的不断发展,互联网金融也进入了大数据时代。面对海量的财经文章,使用自然语言处理技术对其进行解析已成为技术......
针对当前网络中视频媒体数量大、更新快、内容多、下载难,以及基于单机的视频网络爬虫系统中的处理速度慢、并发度低和下载速度慢......
