精准营销信息处理系统的数据处理优化研究

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:along_1979
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
由于业务增长,某公司现有的营销数据处理系统由于设计等原因,无法解决由于业务增长导致的数据处理效率低下问题,导致业务发展受阻。为了能够满足业务发展的需要,通过对现有系统进行分析和研究,提出若干个影响数据处理效率的问题点。根据系统的特点,同时结合业务需求对问题进行解决方案设计与实现,在提升了数据处理效率的同时,提升了系统的维护性,满足了业务对系统处理数据能力的要求。本文从数据结构优化、数据处理任务分配和分布式数据存储三个方面进行对系统存在的问题进行分析,之后按照需求进行方案设计并进行实现。首先,在数据结构优化方面,针对系统处理的目标数据的数据结构,对系统当前处理的所有数据的数据结构进行形式变换和归纳,将多种类型的营销数据的数据结构统一为一种数据结构,从而提供了统一的数据库表结构,在为编写统一的数据处理逻辑提供基础的同时提升了系统的维护性。其次,在数据处理任务分配方面,通过对应用场景的分析,结合数据的自身特征,提出了按照最短等待时间进行任务分配的算法,减少了数据因等待处理的时间过长而导致的数据有效性下降,提高了资源的使用率。最后,在分布式数据存储方面,解决了分布式数据库场景下数据持久化效率较低的问题。通过引入异步处理机制减少了单个数据任务持久化的处理时间,提高了处理效率。通过引入缓冲的思想,解决了特定场景中数据持久化效率低下的问题。本文结合系统特点,通过对业务数据的观察与归纳,设计新的数据结构,对现有处理流程进行理论分析,构建新的业务数据操作模型,有效地提高了系统的数据处理能力,降低了系统维护的复杂性。今后将继续完善上述设计方案,进一步提升系统数据处理能力。
其他文献
中国商品住房市场在1998年住房市场化改革后逐渐发展成为带动国民经济发展的主导产业。但是商品住房市场的迅猛发展也产生了诸多社会问题,居高不下的房价对居民的购房能力提
卷积神经网络模型压缩是一种有效降低卷积神经网络参数冗余和储存的方法。本文以卷积神经网络为基础,围绕基于权值量化和剪枝的压缩方法开展了如下研究工作。第一章是本文的绪论,首先介绍了卷积神经网络压缩的研究背景,其次介绍了国内外关于卷积神经网络压缩方法的研究现状,最后介绍了本文的研究内容和组织结构。第二章本文介绍了卷积神经网络的基本理论,首先介绍了卷积神经网络的组成,包括卷积层、全连接层、激活函数、池化层
本论文在实验室先前研究氮α-位自由基形成碳-碳键的方法学和路易斯酸协同光催化实现邻氨基醇的对映选择性合成的基础上,在可见光催化的氧化还原体系中探索了通过α-氨基酸或
在人工智能研究不断推进和人口老龄化并存的背景下,对服务机器人智能化的要求越来越高,如何更智能地为人类服务成为家庭服务机器人研究领域关注的重要内容,其中,对家庭日常工具的认知要求机器人能够准确的识别和使用工具。针对家庭日常工具功用性认知准确性和实时性的要求,该文从家庭日常工具的功用性角度进行研究,分别基于机器学习算法对多种家庭日常工具功用性进行检测,主要研究内容有以下几方面:首先,家庭日常工具部件具
2016年年底,国务院批复同意中原城市群规划,国家发改委随后便发布了《中原城市群发展规划》全文。中原城市群作为国家级城市群,是中部地区承接发达国家及我国东部地区产业转
目前的大型分布式文件系统需要存储PB规模甚至EB规模的数据,而提供对文件属性信息和全局命名空间管理的元数据服务对系统的性能有着至关重要的影响。使用多台元数据服务器(Me
土地资源是人类生存与发展必不可少的物质根基,也是区域经济社会发展最基本的保障,在“人口-资源-环境-发展”的区域综合系统中,土地资源所占据的核心地位是其他资源无法代替
新兴的数据分析性应用渴望更大的带宽和内存空间,内存尺度问题和新型应用的“内存墙”问题变得更加亟待解决。为了解决这些问题,工业界和学术界一致投入到对新型存储器件的研
土地是社会经济发展中重要的生产要素,土地资源的合理有效配置及利用影响着国民经济的可持续发展。在人地关系日益紧张的今天,农村土地综合整治可以在一定程度上解决城镇建设用地不足、农村建设用地利用粗放等问题。但农村土地综合整治的实施同样会给农户带来一系列的问题,例如生活方式的改变,居住区域的改变,自身心理的变化等等,也就是说会给农户的福利带来影响。农村土地综合整治前后农户福利究竟会发生什么变化,又是哪些因
CO2是导致全球变暖、天然气输送管道腐蚀及天然气燃烧效率降低的主要气体之一,为缓解这些问题,实现CO2/N2和CO2/CH4的有效分离成为了近年来的研究热点。与其他分离技术相比,