【摘 要】
:
伴随着电子计算机以及网络技术的飞速发展,人们逐渐习惯于在网上进行交易。在这样的背景下,网上拍卖快速发展起来,成为电子商务的重要组成部分。同时,作为云计算中的关键技术,MapR
论文部分内容阅读
伴随着电子计算机以及网络技术的飞速发展,人们逐渐习惯于在网上进行交易。在这样的背景下,网上拍卖快速发展起来,成为电子商务的重要组成部分。同时,作为云计算中的关键技术,MapReduce并行计算框架正逐渐在海量数据处理领域得到广泛应用。本文改进了MapReduce并行计算框架,并在此基础上设计开发了一个网上拍卖系统。首先,通过对已有网上拍卖模式进行调研分析,设计了基于英式拍卖改进的网上拍卖流程,解决了投标者随意报价和临近拍卖结束时突然报价的问题;然后,深入研究了MapReduce并行计算框架,分析了传统的MapReduce中存在的数据倾斜问题和输出数据格式限制问题,分别提出了基于映射表的数据均匀分配和两次执行reduce操作的解决方案,并据此改进了MapReduce模型架构;其次,采用改进的MapReduce来处理拍卖数据,设计并实现了一个网上拍卖系统;最后,搭建了Hadoop平台环境来进行数据实验,并对网上拍卖流程进行了功能测试,实验结果表明改进方案的优越性及拍卖系统的可用性。
其他文献
数字电路实验对培养学生的对手能力、创新能力有着重要的作用。虚拟实验平台在满足教学目的的同时,又能够减少资源的投入。随着移动平台的日渐增多,原本的教学软件往往不支持这
互联网时代的到来导致了 web信息爆炸式增长,人们对于快速获取web文本主旨信息的需求已非常迫切,因此,自动提取文本摘要的自动文摘算法和自动文摘软件成为了中文信息处理领域
图像复原就是将退化图像重建为接近于无退化的原始图像的过程,是数字图像处理领域中最重要、最基本的研究课题之一。噪声是导致图像降质的主要原因,因此如何有效去除图像中的噪
云计算将分布在不同地理位置的计算资源和存储资源整合起来形成一个资源池。因其高效、灵活、按需服务、按质付费的特点,使得越来越多的个人、企业和政府等选择一些云服务商
射频识别技术(RFID)是一种非接触式的自动识别技术,其基本原理是利用射频信号的空间耦合和传输特性来实现数据的双向通信从而实现目标识别。无源超高频射频识别(UHF RFID)是
在有限元分析中,六面体网格比四面体网格的计算效率更高。达到同样的计算精度,需要的六面体网格的单元数比四面体少;在网格单元数一样的情况下,六面体网格的计算精度比四面体
微博是一种新兴的社交平台,数以亿计的用户每天在微博上发布海量的微博数据。在这些海量的微博中有些微博具有一定意图,它们通常使用显式或者隐式的表达方式来表达相应的意图
推荐系统作为一种解决信息过载的关键技术,通过挖掘用户对项目的行为信息,构建有效的推荐算法为用户推荐可能感兴趣的内容。近年来,随着Facebook、微博等各种社交网络平台的
随着不可再生燃料的日趋枯竭和环境污染的日益加重,发展风能等清洁、可再生资源已在全世界范围内受到重视。然而,风能属于低能量密度资源且自身具有波动性和不稳定性等特点,又由于风力发电机组的输出功率和风速的三次方成正比,风力发电机组的输出功率具有一定的波动性和不稳定性不可避免。不稳定的风电接入会对电网的稳定运行、电力系统安全以及电能质量的保证带来巨大的挑战。对风电功率预测的研究,是解决这一问题的有效途径,
近几年随着移动互联网的高速发展,作为移动互联网主力消费终端的智能手机也随之发展迅猛,并逐渐融入了我们的日常生活。但是随着智能手机的迅速普及,智能手机的安全问题也逐