随着互联网的飞速发展，从互联网上抓取的数据呈现几何级增长，一方面对网页的存储增加了技术难度，另一方面如何处理PB级别的数据也是摆在工程师面前的技术难题。传统的单机数据处理，虽然十分方便，但所耗时间很长，对于当前情况根本无法满足，所以需要采用分布式方式进行数据处理。而采用分布式处理海量数据，就需要进行并行化程序设计。本系统服务平台就是为了解决策略研发人员方便进行分布式索引建库进行开发的。针对大数据量建库的问题，主要的解决方法是采用分布式存储和计算，利用开源的Hadoop框架完成整体流程。利用Hadoop自身强大的兼容性和易开发性，将大数据分而治之，并结合Hadoop自身的排序机制，完成数据的定向分配和处理，生成最终供用户使用的索引文件；针对研发人员经常调研新的排序策略，而且分布式索引建库需要在同一集群上并行运行，系统解决的方式是给用户提供一个可配置的建库申请文件，在文件中自定义自己的程序信息，保证不同用户可以并行启动分布式建库任务；针对用户对建库过程不了解的问题，采用统一服务平台接口，用户只需提供相应的建库请求文件，即可完成最终的索引并传输至指定的机器，同时在建库过程中，为了使用户及时了解索引建库进度，系统采用阶段性邮件通知，使建库的细节过程更加透明。本文对上述问题提供了合理的解决方案，同时采用C/C++以及Shell语言在Hadoop分布式环境下具体实现了用于图片检索的分布式建库服务平台。经过测试表明，本系统平台能够方便为多用户提供分布式建库服务，而且由于用户采用该统一建库服务平台，只是每次策略不同，系统也更加容易维护升级。