高校数据融合中数据标准与数据同步技术研究

来源 :湖南师范大学 | 被引量 : 0次 | 上传用户:boypoe
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着信息技术高速发展和高等院校信息化建设不断深入,学校各业务部门定制的信息管理系统逐渐增多,由此产生了海量、分散、结构复杂的各类数据,极大地影响了数据价值的体现。如何将这些孤立分散的异构数据转变为高质有效的共享数据,引起研究者们的广泛关注。数据融合通过对各业务数据进行动态抽取、转换,最后加载至统一建模的大型数据库中,能有效提升数据的利用率和保证数据的一致性。为更好实现数据融合,不仅需要结合高校实际情况制定出统一的数据标准,还需要对不断变化的数据进行动态同步处理。因此,本文将从数据标准和数据同步两大方面进行设计与实现,主要工作内容如下:(1)针对各业务系统在数据融合过程中数据不一致与数据标准缺乏问题,充分调研了某大学信息化现状和需求,结合相关标准对学校基础数据进行梳理,制定了一套较为全面的数据标准。(2)在数据融合整体架构中引入数据湖作为中间库,将数据同步过程拆分成两步来实现。第一步是将业务数据同步至数据湖,此步骤的关键技术是变化数据捕获,为此,提出了一种控制表法、时间戳法或日志法的混合型变化数据捕获方法,根据业务系统的开放程度和结构特性选择具体方法。第二步是将数据湖数据同步至数据中心,此过程的关键技术是参照数据标准文件实现各种数据的转换,通过引入ETL开源工具Kettle的数据转换代码实现对数据的转换处理,且数据转换过程将在数据湖和数据中心中完成,减少了对源业务系统数据库性能的影响。(3)对设计的数据同步方案进行了系统实现,并通过一项基于数据中心的信息查询,检验了数据融合和数据同步的实现效果。检验结果表明,融合和同步的效果都达到了本文设计预期。
其他文献
目的 研究骨质疏松性胸腰椎骨折(OTF)患者的临床特征及及漏诊影响因素。方法 纳入我院收治的OTF患者108例,根据首诊中是否出现漏诊情况将其分为漏诊组(45例)和确诊组(63例)。比较两组的临床特征;分析OTF患者漏诊的危险因素;分析OTF漏诊与确诊患者的共性中医症候特征。结果 两组的外伤情况、单椎体骨折、叩击痛1~2级、疼痛程度占比比较,差异具有统计学意义(P<0.05);两组的年龄、性别、发
课堂是学生获取知识、开拓思维、形成能力的主阵地。在新课程改革的大背景下,如何通过优化教学设计,构建高中语文高效课堂,进而提高学生的语文学习能力和水平,是每个高中语文教师必须关注的课题。《鸿门宴》这篇文章中具有较为生动的细节和场面描写,文章应当从学生的角色出发,通过创设情境或角色体验来激起学生探究的积极性,帮助学生走进故事中人物的内心。使学生能够流畅地朗诵课文,积累文章中的重点字词和句式。因此,本文
为了有效减轻义务教育阶段的学生在参加校外培训时的压力和过重的作业负担,提高学校育人水平,持续规范校外的线上培训和线下培训,2021年7月24日,中共中央办公厅、国务院办公厅印发了《关于进一步减轻义务教育阶段学生作业负担和校外培训负担的意见》.“双减”政策的落实将学生的学习精力全部都转移到课堂上,因此也对教育工作者们提出了更严格更高标准的要求,只有对自身的教学方式进行不断创新,才能够保证学生通过课堂
蘑菇中毒是我国食物中毒中死亡率最高且死亡人数最多的突发公共卫生事件之一,对有毒蘑菇进行快速准确的鉴定对蘑菇的中毒预防和中毒后的准确有效治疗具有至关重要的作用。在我国蘑菇中毒导致的死亡事件中,除误食剧毒鹅膏菌或含鹅膏毒肽的环柄菇属、盔孢伞属物种引起外,主要由误食亚稀褶红菇Russula subnigricans引起;亚稀褶红菇已成为致命的剧毒蘑菇之一。同时,近年来在我国导致胃肠炎型症状的毒蘑菇中毒事
痤疮是一种慢性细菌性皮脂腺炎性疾病,通常在青少年的面部和上躯干(前胸部和后背)上形成。其特征是形成粉刺,丘疹,结节,脓疱和囊肿,在青春期感染者中占35%至90%以上。痤疮通常可以分为两大类:非炎性痤疮(开放性和闭合性粉刺)和炎性痤疮(丘疹,脓疱,结节和囊肿)。痤疮的发病过程主要经历四个主要病理生理过程:(ⅰ)炎症介质释放到皮肤中引起的炎症;(ⅱ)导致角质形成的角质化过程改变;(ⅲ)在雄激素控制下皮
在无线网的边缘,常常会出现一个主节点向多个从节点(传感器节点)收集数据的应用场合,如监测场合。能够实时且快速地采集数据,往往是这类系统的一个基本要求。然而工作于2.4GHz波段的蓝牙5.0在应用于上述实时环境时存在两个明显不足:(1)当有多个扫描节点同时要求与广播节点连通时,到底哪一个扫描节点能够获得优先连通的机会,是一个随机事件,有时候优先级较低的节点反而有可能先获得连通。(2)即使只有一个扫描
目的:探讨利用股骨近端髓内钉(proximal femoral nail,PFN)闭合复位治疗复杂股骨粗隆间骨折后阳性支撑、阴性支撑、中性支撑三种不同支撑方式对疗效的影响。方法:回顾性分析2014年1月~2019年6月我院骨科应用股骨近端髓内钉(PFN)闭合复位内固定治疗复杂股骨粗隆间骨折90例,年龄60~88岁,平均(74.98±6.82)岁。根据术后髋关节正位X线片中骨折端内侧骨皮质的位置关系
基于前期研究发现miR164c和miR168a参与水稻种子活力的调控,随后构建了水稻Kasalath的MIM164c、OE164c和MIM168a、OE168a转基因株系,结果发现这些T-DNA突变体及同一T-DNA突变体的不同株系间,其休眠特性和基因组结构也存在差异:1.种子的萌发率检测结果表明,脱水处理能降低种子休眠程度;40℃去休眠处理5 d后种子萌发率进一步提高,但仍有少数种子存在休眠;自
目的:通过对比腹腔镜联合胆道镜保胆取石术(双镜联合保胆取石术)与腹腔镜胆囊切除术(laparoscopic cholecystectomy,LC)的相关临床指标,研究探讨双镜联合保胆取石术治疗胆囊结石的临床疗效。方法:收集2019年1月至2020年12月期间在湖南师范大学附属长沙医院住院并行手术治疗的62例胆囊结石患者,根据手术方式不同分为双镜保胆组(实施双镜联合保胆取石术)30例和胆囊切除组(实
供应链是商品生产及流通中由参与企业及消费者组成的网链结构,供应链管理则是对整个供应链企业及部门之间的协调规划,覆盖了供应链中产品、资金以及信息的流通,目的是提高整个供应链的效率及利益。要使供应链发挥最大效益,首要解决的是各个企业部门之间的信息交流问题。有效的信息沟通能使企业准确预测下游订单,安排符合实际的订单任务,降低由供不应求以及货物囤积带来的经济损失,提高部门业绩、企业业绩,甚至是整个供应链业