工业大数据环境下数据质量关键问题研究

来源 :齐鲁工业大学 | 被引量 : 0次 | 上传用户:clubshe
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
工业大数据是智能制造的基础,工业设备在运行过程中产生了大量的数据,这些数据是提升制造业生产力的关键因素。但是数据中存在一些数据质量问题,直接应用这些数据很有可能产生错误的结果,因此,关注数据本身的质量问题是提高工业大数据数据质量的重要方面。本文在传统数据质量问题研究的基础上,针对工业大数据的特点,进行有关工业大数据质量问题的研究。首先介绍了工业大数据质量问题的研究现状,分析了工业大数据的数据特点,并且对数据质量问题进行分类;然后,针对工业大数据中的一致性问题和时效性问题,分析了数据质量问题产生的原因,并针对问题提出了对应的解决方法。具体的工作可以概括为:(1)针对工业大数据中存在的时间戳缺失和数据的时间不准确的问题,提出了时效规则提取的方法和数据时效性修复的方法,从而较好的处理了工业数据中的时效性问题。(2)针对传统数据清洗方法一致性清洗效果差的问题,设计了基于数据一致性的数据清洗框架,能够自动迭代的执行数据检测和数据修复两个过程,提高了数据清洗效率。(3)基于提出的时效性和一致性问题的解决方法,结合炼钢行业的数据质量问题的特点,提出了炼钢行业的数据质量问题的解决方法,并在分布式环境下进行实现。实验证明,本文提出有关数据质量问题解决的方法有效,对于工业大数据环境下数据质量关键问题的研究,对于数据质量问题的解决、数据质量的提高、企业的决策有重要的意义。
其他文献
目的:在大鼠移植血管模型中,探讨MMP-2/TIMP-2表达改变在移植血管内膜增殖中的作用。方法:SD大鼠72只随机分为三组,同系移植组(A组)、异系移植组(B组)和异系移植予雷公藤组(T
徽州文化具有悠久的历史,在它的形成发展历史过程中,建筑及其雕饰艺术对徽州文化的发展产生了深远的影响。相对应的,在徽州雕饰艺术之中也蕴藏着徽文化的思想内涵与艺术审美。近年来,由于国民经济的快速增长,人们的生活水平的迅速提高,住宅空间环境设计也在中国快速发展起来。其中就包括别墅环境的设计。在当今的别墅环境设计中,大多数只是单纯的模仿西方花园别墅的设计,而没有很好的结合我国的特色文化进行二次创作。伴随着
目前,室内颗粒物污染已受到广泛关注,人们逐渐意识到悬浮在空气中的颗粒物会持续影响空气质量并对人体产生不利影响。由于人们在室内度过90%以上的时间,因此了解室内颗粒物污染分布特性至关重要。在本次研究中,实验在位于青岛的一通风良好的办公室内进行,使用具有四种尺寸范围的激光粒子计数器Lighthouse同时测量室内和室外颗粒物浓度。实验测量的颗粒物粒径分布范围为0~0.3μm,0.3~0.5μm,0.5
目的:探讨红细胞分布宽度对糖化血红蛋白异常的肺炎患者病情及预后评估的价值。方法:回顾性分析福建省立医院2018年1月至2019年2月收住重症监护室的肺炎患者106例,根据糖化血红蛋白分为糖化血红蛋白正常组55例,糖化血红蛋白异常组51例。比较两组患者入院时的基本信息及红细胞分布宽度指标是否存在统计学差异。分析糖化血红蛋白与红细胞分布宽度的相关性及其与APACHEⅡ评分、PSI评分的关系,分别比较两
本论文设计合成了一系列含大位阻氮杂环卡宾配体的混配型镍(Ⅱ)配合物,并对它们进行了全面的表征。与此同时,考察了上述配合物在氯代芳烃、萘甲醚和苄基型氯代烃还原交叉偶联
药物分子的药效与它的构象特征以及手性特征相关。通过识别与生物蛋白相互作用的药物分子的构象异构可以获取药物与蛋白之间的作用机制,通过识别药物分子的手性差异可以在药物制备中检测药物分子的手性纯度。在关于药物分子的构象研究中,需要基于生理环境,这种环境往往是液态,并存在各种复杂的生物大分子。而目前已有的检测手段大多都无法实现在液态环境下对药物分子进行原位精确测量。可以在液态环境下检测的方法又会因为蛋白分
含氟化合物是一类重要的有机化合物,广泛应用于医学、农化、材料和正电子发射断层显像的示踪剂。据统计,目前市场上超过25%的医药和30%-40%的农药都含有氟原子,例如立普妥,普
本文通过野外露头观察、岩心观察、薄片观察、扫描电镜、成像测井技术、二维可视化油气运移模拟实验以及岩石三轴实验等实验方法,对不同尺度(宏观尺度、中尺度、微观尺度)不
Gauss和与Jacobi和是两类重要的特征和,在基础数学和应用数学领域都有广泛应用。经典的Gauss和与Jacobi和通常是定义在整数环的剩余类环或者是有限域上的。近年来,随着理论的
机器人在陌生环境中移动的同时使用传感器采集数据并进行计算,以获取当前自身在环境中的位置,同时建立周围环境的描述性地图,这一过程被称为即时定位与地图构建(SLAM),围绕这一目标科研人员开展了大量的研究工作。其中使用相机采集影像数据进行的SLAM被称为视觉SLAM(v SLAM),由于经济、方便等优势成为研究热点。特征法是目前视觉SLAM中的主流方法,通过从影像中提取抽象几何特征并进行数据关联解算不