近年来，IT技能自动测评无论在理论上和应用上都得到了飞速发展，测评技术也进一步成熟，随着信息技术的迅猛发展，为满足高校《大学计算机基础》课程考核的需要，各高校纷纷进行操作技能自动测评的研究和尝试，大多数高校已经或者即将把在线测试作为组织考试的一种手段。本文针对《大学计算机基础》课程中的操作技能部分进行了研究，并开发了一个自动测评系统。本研究进行了技能自动测评的理论、技术的研究和探讨，为改革传统的考试模式提供新的理论参考和依据，特别是结合《大学计算机基础》课程进行了具体的教学考试改革研究，开发的在线测评系统实现了关于PowerPoint演示文稿设计、Word编辑排版的题库制作、在线测试和自动评分。本文首先对IT技能自动测评系统特点和总体结构进行阐述，研究大学计算机基础操作技能的功能需求，并对系统开发中应用到的各种技术和开发平台进行简单的介绍，然后通过对测评内容的分析，结合关系数据库的设计特点，提出了自动测评系统数据库的设计方法和步骤，并且完成了整个自动测评系统的总体和详细设计。在大学计算机基础操作技能自动测评系统的开发过程中构建了相应的应用实例和测评程序，并阐述了系统实现的关键技术及部分功能的具体实现方法。所开发的系统具有模块化、可重用、易维护等特点，最后对今后的工作进行了展望。