大数据时代 智谋未来

来源 :中国计算机报 | 被引量 : 0次 | 上传用户:chengmoshijing
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  据IDC预测,到2020年,全球以电子形式存储的数据量将达到35ZB,是2009年全球存储量的40倍。根据IDC的统计,在2010年底全球数据量已经达到了120万PB或1.2ZB。如果将这些数据都刻录在DVD上,那么光把这些DVD盘片堆叠起来的长度可以往返地球和月球之间(单程约24万英里)。
  众所周知,数据可以分为3种:结构化数据、半结构化数据和非结构化数据。其中,大多数的数据属于企业业务过程中产生的文档等非结构化数据。
  大数据时代已经到来,悲观者深为数据的管理和维护而忧虑,乐观者则看到了大数据的大价值。何谓大数据,目前没有统一的定义,通常认为它是海量的非结构化数据,其特点是数据量很大,数据的形式多样化。如何存储这些快速增长的海量数据?如何对大数据进行分析处理,挖掘出其价值?这些问题成为几乎所有企业面临的共同挑战。
  大数据时代的挑战与目标
  大数据时代的挑战包括:如何实现高效、智能的大数据存储?非结构化数据正在呈海量增长趋势,如何对其进行有效的管理和应用?现有数据保护与文档归档机制能否应对日益增长的海量数据?如何攻克移动数据管理的难点问题?如何在复杂的数据环境下实现可靠的数据安全?这些正逐渐成为CIO所面临的共同挑战。
  但是我们发现,这些来自大数据的挑战,归纳起来主要只有两点:
  其一,管理好大数据,包括大数据的产生、存储、保护、归档,到安全维护等各个方面。从根本上讲,这属于IT管理维护范畴,只不过数据量超出常规管理范围后,管理、维护的难度大幅度提高。
  其二,应用好大数据。这是企业数据管理的最终目标。大数据即意味着大价值,数据与数据、数据与人、数据与业务的关联性能给企业带来巨大的价值。大数据应用的挑战既有应对数据的流动性、关联性、智能化所带来的挑战,也有基于大数据进行深度挖掘所带来的挑战。
  但是,这两点之间是相辅相成,管理和维护的目的是使用,使用的基础是好的管理维护。
  云计算与大数据 时代的交集
  说到大数据的管理和使用,很多人都会想到云计算。云计算技术可以实现IT资源的自动化管理和配置,降低IT管理的复杂性,提高资源利用效率。
  对企业来说,主要的业务由私有云支撑,而非关键业务或者突发性业务可以采用公共云资源。私有云与公共云需要无缝连接,形成合理的混合云环境。
  可见,云计算可以承载大数据,大数据的管理和应用,可以通过云计算的资源共享、高可扩展性、服务特性来搭建和运营。
  大数据的大内涵
  大数据与云计算的交集是外部交集,大数据内部的关联、挖掘才是大数据的大内涵。这个调整远远超过云计算的应用难度,数据与数据的复杂关系,比如跨应用系统的结构化数据与非结构化数据的关联;海量数据的存储以及数据的分享;数据(结构化与非结构化)与业务和决策间的关联。
  解决这个问题的一个思路是EMC提出的信息生命周期思想,但是在很多业界同行看来,这个思想在云计算和大数据时代需要得到升华,而这个方向就是智能,而且是全面的智能。IBM提出了智慧的地球,而我国新兴的IT企业代表爱数则提出了基于统一智能和信息生命周期思想框架的智能数据管理解决方案。
  这是大数据管理和应用的一个新思路。爱数相关负责人介绍,这种统一的框架采用的是云计算结构,其主要技术突破在于资源池化和对法规管理的遵从,从数据生成阶段就将大数据纳入到生命周期管理中,通过统一的智能策略,不但能对数据进行很好的运维和保护,还能在数据使用和挖掘阶段与业务结合起来,提供统一的数据信息平台。
  数据之道 智取未来
  在大数据时代,无论是对企业用户还是对IT供应商来说,管理、使用大数据都需要有大思维和大规划。
  在IT领域,计算时代成就了Wintel为代表的一批厂商,那个时代的旋律是摩尔定律;网络互通时代正在成就包括Google、Facebook、腾讯为代表的网络新贵,这个时代的主旋律是互通;大数据时代的到来,为更多的厂商带来了机会,而这个时代的主基调无可厚非是智能。
  正所谓,数据之道,智取未来。
其他文献
三网融合的加速,让广电行业充满了IP商机,广电市场如今已被通信企业视为新的淘金天堂。在这一浪潮下,各种基于IP网络的技术开始被广泛使用,广电运营商也在些新技应用的过程中,发现了潜力巨大的增值业务商机。  IPTV走着看 广告投放更精准  通过IP网络,有线运营商可以提供比过去更为丰富的增值业务。  一直在为全球宽带市场提供语音、高速数据、视频和移动通信业务IP解决方案的ARRIS,如今反而在三网融
作为“智慧地球”的“操作系统”,IBM服务管理软件Tivoli已经从数据中心的IT领域跨入了非IT的实体资产领域,并逐步细化延伸。纵观Tivoli近年来的发展,其脉络清晰可见:从当初提倡数据中心利用可视化、可控化和自动化的手段到倡导通过整合为业务提供价值,之后,IBM的服务管理方向是整合IT和非IT资产的信息和管理,不断优化能源和空间等IT和非IT资产,并融入分析能力。作为IBM Tivoli的年
银行卡遭盗刷,社交网站用户名和密码被盗用……一时间,网络个人信息以及交易数据安全牵动着社会的神经。今年的国际消费者权益日就以“消费与安全”为主题,引发社会对消费者安全话题的关注。  非正版80%被恶意感染   微软中国近期进行了一项针对盗版软件与恶意软件感染关联的研究。研究显示,街头和在线盗版软件产品恶意软件感染率为80%。微软数字安全中心(Microsoft Digital Security
2012年度中国  行业信息化  最具影响力企业奖  2012年度中国  行业信息化  值得信赖品牌奖  深圳市路畅科技有限公司成立于2006年8月,是一家集产品研发、生产和销售于一体的民营高新技术企业、国家火炬计划重点高新技术企业、软件企业。  深圳市路畅科技有限公司(简称路畅)总部和研发中心设置在深圳高新技术产业园,还在深圳光明新区、郑州开发区设有分公司,在中国设有七大销售区域,并在各省市设有
随着各种新技术、新模式的不断推陈出新,很多人可能都已经忘却曾经红极一时的ASP模式,而在热火朝天地讨论“云”。然而,北京二商集团有限责任公司(简称北京二商集团)依旧很好地应用着ASP平台,并且将越来越多的下属单位纳入这个平台中来。  北京二商集团科技信息部部长杨杰书談道,集团在2005年采用基于ASP模式后,对其进行不断完善,现在其信息化的模式已经具备企业私有云的特色。  以合理的试点切入  所谓
“八九年前,硬盘市场的产品类型非常单一,没有企业级硬盘、监控硬盘等种类繁多的产品。今天,西部数据有专门的监控盘、企业盘,就算是消费产品,也分出蓝、绿、黑等面向不同应用的产品,还推出了SSD产品。”谈到硬盘市场的变革,西部数据中国区总经理兼资深销售总裁黄德怡如是说。  产品的革新动力来自产业应用的需求。例如,云的普及就影响到硬盘。“很多提供云服务的公司都喜欢高容量的硬盘,并且会选择对RAID模式提供
赛迪顾问发布报告预计,2013年中国LTE设备市场规模将达420亿元,2015年中国LTE设备市场规模将达1220亿元。
“今年4月发布的《第18期赛门铁克安全威胁报告》显示,2012年APT攻击的数量较上一年激增了42%。而在这些意图窃取企业知识产权和商业信息的网络攻击中,31%是以中小型企业为目标。”赛门铁克大中华区信息安全技术支持部总监罗少辉如此告诉记者。  通常认为,APT攻击主要针对大型企业或者存在于国家之间的信息对抗中,如著名的谷歌极光(Google Aurora)攻击,似乎离中小企业很远。而罗少辉的一席
近年来,我国公用事业行业的快速发展带动了IT支出的快速增长。“十二五”期间,我国将把保障和改善民生作为加快转变经济发展方式的根本出发点和落脚点。公用事业作为民生的重要领域,将持续受到产业政策驱动。  近年来,我国公用事业行业的快速发展带动了IT支出的快速增长。  IT支出增长强劲  赛迪顾问的数据显示,2011年我国公用事业行业的IT支出约为195亿元,其中解决方案市场规模约为28亿元。  电网行
在收购Compellent存储公司之后不久,戴尔便将流动数据架构定为其存储的核心策略。数据能够像水一样,在不同的存储平台之间自由流动,是戴尔流动数据架构追求的最高境界。流动数据架构带来的最直接的好处之一是,可以实现存储系统的平滑升级。  横跨三大硬件平台  在流动数据架构理论的基础上,戴尔近日又发布了流动文件系统。戴尔流动文件系统是一个企业级分布式文件系统,具有缓存管理、CDP集群、客户端负载均衡