数据显断层与数据隐断层的研究与应用

来源：上海理工大学学报杂志2016年第5期北京时间：

作者：夏骄雄

单位：上海外国语大学 贤达经济人文学院, 上海 200083;上海理工大学 光电信息与计算机工程学院, 上海 200093;上海大学 计算机工程与科学学院, 上海 200444;上海市教育委员会 信息中心, 上海 200003,上海理工大学 光电信息与计算机工程学院, 上海 200093,上海大学 计算机工程与科学学院, 上海 200444,上海市教育评估院 教育评估研究所, 上海 200031,上海大学 计算机工程与科学学院, 上海 200444,上海大学 计算机工程与科学学院, 上海 200444,上海理工大学 光电信息与计算机工程学院, 上海 200093

摘要：建立能够和谐平衡各个信息系统之间数据断层的机制是实现管理决策变革最关键的3大基础之一，也是智能决策支持系统研究领域的重点内容之一.随着互联网+时代的到来，各式各样的数据资源不断积累，数据断层现象在多个领域表现得愈加明显.通过对数据断层理论体系的进一步研究与实践，着重分析微观层面的数据断层现象，一方面用显断层概念描述各系统之间以及系统内部存在的较为明显的断层现象，另一方面用隐断层概念描述各系统之间以及系统内部存在的非明显的断层现象，并在数据显断层中引入缝隙的概念来描述主题无关数据对象，采用数据聚合的技术手段来降低缝隙数据的断层属性，同时在隐断层中引入“有效密度”来形象地描绘数据分布情况，通过数据熔合来减少无效数据占用的空间.最后以上海“动感101”音乐电台的移动客户端应用日志数据为例，分析了电台数据中所存在的数据显断层和数据隐断层现象.

关键词：智能决策支持系统;微观数据断层;数据聚合;数据熔合;缝隙检测;数据显断层;数据隐断层

基金资助：国家自然科学基金资助项目（40976108，61303097)；上海市重点学科建设资助项目（J50103)；上海市第二期（2016年)民办高校科研项目（2016-SHNGE-08ZD)；上海大学研究生创新基金资助项目（SHUCX070037，SHUCX120105)