面向流数据的学习索引研究

来源 :苏州大学 | 被引量 : 0次 | 上传用户:ok8000
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
学习索引是最新提出的一种索引范式,旨在利用机器学习模型学习存储介质上数据的分布,从而达到降低空间成本并提高检索效率的目的。目前的学习索引工作部分或完全遵循“数据是一维、静态的,且有序地存储在内存数组中”的强假设。然而在大数据时代,尤其以流数据为代表的应用场景中,上述的学习索引工作很难发挥实际的作用。终其原因,流数据具有的多维性和动态性与已有工作存在的强假设是相悖的。本文首次将学习索引的应用范围拓展到流数据场景,具体工作如下:(1)本文提出了支持频繁数据更新的一维动态学习索引框架。该框架由存储结构、学习模型和反馈机制三个部分组成。基于稀疏内存数组的存储结构提供了对有理论性能下界保证的数据插入操作的支持。基于分段思想的学习模型拟合了数据段上键值与相对位置的映射关系。反馈机制将存储结构上的数据更新及时地反映到学习模型的参数上。实验证明,该框架能够以仅增加少量空间成本为代价,提高了查询操作的效率,并减少了参数重训练的时间成本和计算资源开销。(2)本文改进了学习索引在面对多维数据时的投影策略并设计了相应的查询算法。多维空间中的数据不存在天然的顺序,学习索引在处理多维查询时需要通过投影策略将数据映射到一维空间。为了解决流数据在映射后存在的分布倾斜问题,本文针对分布漂移和维度相关两个引起分布倾斜的原因对投影策略提出了相应的改进。在动态学习索引框架和投影策略的基础上,本文提出面向多维空间数据的范围查询和近邻查询算法。实验结果表明,本文提出的方法能够对比R+树和KD树等传统多维索引提供更高的查询效率。
其他文献
园艺博览会的举办所带来的综合效益使得各个城市先后加入申办园博会、建造园博园的潮流中,园博会作为景观展示、文化交流的平台很大程度上促进了园林景观的发展与地方文化的弘扬,如何将地域文化内涵较好地融入园博园场地景观中成为值得探讨的课题。本文通过对沈阳园博园、西安园博园和北京园博园地域性景观的深入研究,总结借鉴其成功之处,针对我国园博园景观中地域文化传承不足的问题,从设计原则、表达载体、表现方法和创新途径
学位
2019年底,新冠肺炎疫情刚刚爆发,在很长一段时间内,给人民带来了深重的影响,而彼时疫情应对经验缺乏,疫情走向不甚明朗,人们倾向于以面向过去的记忆表达来缓解内心的焦虑,重拾心理安全。本文以豆瓣2020年的“疫情记忆”为案例,挖掘网民记忆实践的特征,探索其中集体记忆的生成过程。研究主要采用质性分析法、语义网络分析法,探究个体记忆通过豆瓣如何向集体记忆转化?首先,本文通过分析豆瓣“和新冠肺炎疫情有关的
学位
锡澄运河作为京杭大运河的支流,连通着江阴地区的城镇水域,也成为江阴城市历史、文化的链接纽带。锡澄运河沿岸所形成的带状景观,串联着城市中不同功能,留存着人们各个时期的历史记忆。如何以新的视角合理利用锡澄运河沿岸带状景观空间,营造城市绿色活力生态廊道,彰显城市历史文化,唤起人们场所记忆与文化认同感,成为值得探讨和思考的课题。本课题以运河沿岸带状景观为研究对象,以“共生”、“渗透”理念切入。首先,通过文
学位
在国家医疗卫生信息化建设统一部署推进下,我国电子健康档案(EHR)工作从零星试点建设的初始状态逐渐推广至全国范围内“遍地生花”,经过长时间的探索耕耘,整体取得了实质性的进展。在促进医疗健康体系深度发展,由“卫生”信息化到全民“健康”信息化的管理政策跨越下,“大卫生观”、“大健康观”理念的践行下,电子健康档案的价值有了更深层次的凸显。强化健康医疗数据治理,电子健康档案所载个人全生命周期的医疗卫生健康
学位
"间者并行,甚者独行"源自《黄帝内经》,是《内经》治疗疾病的原则之一。在探讨病变本身的同时论述如何治疗疾患,高度概括了病机及治则,极具理论及临床意义。该文主要讨论"间者并行,甚者独行"理论的丰富内涵,以及从"急则治其标、缓则治其本"角度谈谈其在《伤寒杂病论》、现代中医临床、冠心病等急危重症中的应用。"间者并行,甚者独行"的深远意义在于辨证论治的基础上结合临床,灵活应用。
期刊
商业街区是人们生活空间的基本载体,也是城市发展的重要组成部分,为人们日常的购物、休闲与交往提供了必要的保障。随着城市生活质量和消费水平的提高,越来越多环境优良、设备完善的新型商业街区不断涌现,从而给历史商业街区的环境建设带来了巨大的压力。由此,从“城市修补理念”出发,“活化”历史商业街区的公共环境已经成为我国当前旧城更新的重要手段,也是学界日益关心的话题。本课题以济南泉城路片区的公共环境作为研究对
学位
监察体制的改革引领了打击贪污腐败的新纪元,创建了权力集中的专门的国家监察机关,集中统一领导监察工作,以高效反腐为目标,提高打击腐败的力度,建设清正廉明的法治环境。《监察法》的制定为监察机关提供了直接的行为规范,在职务犯罪案件调查特殊性的影响下,立法层面上为方便监察调查活动的顺利开展更侧重于公权力的赋予,由此造成了高效反腐和权利保障之间的价值冲突。留置措施是监察调查中的一项重要措施,是监察调查措施中
学位
随着信息技术的发展,互联网产生的信息量日益增长,带来了信息过载的问题。由此产生的推荐系统成为互联网平台研究的一个热门问题。推荐系统通过研究用户历史行为,判断用户兴趣与偏好,进行信息过滤与内容推荐。用户在互联网上的喜好与行为意图是由多种因素构成的,这些因素通常是耦合的,难以区分。利用解耦表示学习方法帮助推荐系统识别与区分这些耦合因素,可以挖掘隐藏在用户行为背后的偏好与意图,提升推荐的个性化效果。本文
学位
随着人口的迅速增长和工业发展进程的加速,用水量和排水量也在迅速增长,资源不足造成的天然水资源缺乏和环境污染使得水体环境污染和水生态环境污染问题日益加剧。运用生态修复的手法,对云南青海湖湿地公园景观设计进行了研究,根据现状条件将青海湖湿地公园总体结构为:“一湖、两廊、七区、十二景”,分为湿地科普区、水田展示区、水上森林区、湿地洲渚区、康体休闲区、水岸风情区、云岛景观区等功能区,并就相关问题提出湖泊淤
期刊
细胞膜是细胞内外环境的分界,参与多种基本生理反应过程。物质与细胞膜的相互作用是其进入细胞发挥功能或造成细胞毒性的第一步。一些具有生物活性的聚合物和多肽分子具有良好的生物适应性、靶向选择性、膜结合亲和力和细胞内化能力,在抗菌、药物和基因递送、生物检测等方面具有应用潜力。然而由于细胞环境的复杂性和研究手段的局限性等因素,这些活性分子与细胞膜发生界面相互作用的过程和机制尚不明确。传统的细胞膜界面研究的实
学位