在信息检索领域中,信息检索系统的评估工作一直以来对检索技术的研究、发展和应用有着巨大的影响。从上个世纪六十年代开始,测试集成为评估工作的主要形式,其构建的质量直接影响着评估结果的准确性。目前,测试集仍是实验室信息检索系统评估的主要手段。测试集在构建过程中所使用的语言类型决定了其能够进行评估的范围。国外已经建立的测试集,其大多数所使用的语言为英文。英文测试集不适合对中文信息检索系统进行评估。国内对中文测试集的研究仍处于起步阶段。中文测试集的缺乏,制约了检索技术的发展。建立一个实验室环境下的小型中文测试集,无疑能够极大的方便研究者的使用,进而推动信息检索系统的研究。论文参照国外各种测试集的构建方法与经验,提出了一个用于评估信息检索系统的小型中文测试集的构建方案。主要完成了以下工作：(1)构建了由文档集、查询集和相关判断集三个部分组成的测试集。其中,采集并整理了1648篇以中文内容为主的文档,将其作为文档集；针对文档集中文档的具体内容初步构建了15个查询主题；对两组判断人员的相关判断结果进行整合,构建了用以评估检索系统性能的相关判断集。(2)采用Kappa一致性系数和Kendall和谐系数两种不同的统计量对两组相关判断结果进行了一致性分析。分析结果证明两组判断结果具有较高的一致性,进而表明构建的测试集具有较高的可信度。