随着计算机技术的发展,云计算技术逐渐成为人们关注的焦点。云计算过程中产生的数据已经成指数增长,为了保存海量的数据,云存储技术逐步发展起来。云存储技术很大程度上依赖于Hadoop平台。Hadoop是由Apache开发的一种分布式平台,在云计算和分布式存储方面表现出很大的优势,各大企业都在将Hadoop应用到云存储方面做了大量研究。HDFS是Hadoop平台的分布式文件系统,具有强大的数据存储能力和扩展能力,但是由于业务的多样化和数据格式的差异化,HDFS在设计上存在一些缺陷,要应用到具体的场景需要进行优化。本文的研究主要是构建通用的云存储系统,并解决云存储系统中HDFS文件系统在存取大批量小文件是内存消耗严重、效率低下的问题。基于HDFS的云存储系统在存储小文件时,将大量的小文件存储在不同的数据节点上,单独占用数据块,该策略导致内存消耗严重并存取效率低下,小文件提取时存在读取耗时严重的问题,本文通过对比分析多种小文件存取方法,提出了小文件存储时特殊处理的方案,对小文件先进行合并处理,并以键值对的方式保存小文件的索引信息,改善了小文件存储时的内存消耗和存取效率。开发Web程序,基于Hadoop搭建云存储系统,然后将改进的小文件存储方式与原始的小文件存储方式对比进行测试,测试结果表明改善后的云存储系统在存取小文件时具有更好的效率。本文设计的系统基于HDFS文件系统并改善了小文件存取方式,改善后的云存储系统在Name Node内存使用率、文件存取效率方面改善效果明显,这一成果将为后续基于HDFS文件系统的云存储系统的进一步研究提供重要的依据与参考。