学位论文 > 优秀研究生学位论文题录展示

数据资源中数据断层现象的研究

作　者: 汪晶玲
导　师: 夏骄雄
学　校: 上海大学
专　业: 计算机应用技术
关键词: 数据资源的非均质性数据断层孔隙检测数据压实数据压溶
分类号: TP274
类　型: 硕士论文
年　份: 2013年
下　载: 0次
引　用: 0次
阅　读: 论文下载

内容摘要

随着数据资源不断积累，数据断层现象在生活中的多个领域表现地愈加明显，逐渐引起人们的重视。数据断层是由数据资源的宏观和微观非均质性所造成的，它的存在不仅影响到用户从海量数据中获取有用信息的效率，而且给数据资源的管理也带来诸多不便。因此，如何检测并妥善处理数据断层是数据资源分析领域的关键问题。断层的概念来源于地质学，是岩石发生断裂并产生明显位移的一种现象，在地质学上有着重要的理论和实际意义。地质断层理论发展相对成熟，并在实际生活中得到广泛应用，例如石油开采、地震预防等。通过研究发现，地质断层理论对于数据断层理论体系的架构具有重要的参考作用和启示作用。参考地质断层理论，本论文通过对比研究、学科结合等方式，首次较为完整地从数据挖掘的角度定义了数据断层的一系列概念和方法，并从数学角度进行解释，引入信息熵、概率统计等内容来制订数据断层判断的定量标准,对数据断层现象进行详细描述。然后，以微观数据断层作为主要分析对象，提出孔隙检测、数据压实、隐断层检测和数据压溶等技术手段对数据断层进行判断和处理，并就查找数据显断层提出了基于能量和层次聚类的孔隙检测算法，检测数据隐断层提出了隐断层检测算法。最后，以上海“动感101”音乐电台的移动客户端应用日志数据为例，构建了日志分析系统来处理电台数据中存在的数据断层，从而有力地支撑和验证了数据断层理论和判定方法。本论文的工作是对数据断层理论体系的初步研究，从不同角度对数据资源进行了开拓性探索，有着重要的理论价值和重要意义。实际应用数据的验证实验充分说明了数据断层理论的科学性和有效性，为进一步研究奠定了坚实基础。

数据资源中数据断层现象的研究

内容摘要

全文目录

相似论文