美国陆军研究实验室ARL评估标准简介
贺飞 北京大学
美国陆军研究实验室（Army Research Laboratory，简称ARL)是美国政府《1993政府绩效和结果法案》(Government Performance and Results Act of 1993,GPRA)唯一指定要进行绩效评估的试点研发组织。因此，ARL的管理者被要求开发一个来测度其特定规划文件中的战略和年度绩效目标的进展情况的系统。ARL的绩效评估系统是按GPRA的要求而开发的，通常被称为绩效评估构架（Performance Evaluation Construct）。
一直以来，ARL技术雇员对满足军队当前和长远需求的技术转移的重要性持续保持出清晰而又明确的认识，并且热情很高,其工作的总体质量给人留下深刻印象。美国陆军研究实验室技术评估委员会(ARLTAB)的职责是每两年对ARL的科研、试验发展和分析项目的科学和技术质量进行评估。专设六个工作小组协助ARLTAB的评估工作，每个小组分别对应ARL的六个分部之一。此外，应ARL要求，ARLTAB还对部分跨部门的工作进行评估，例如在2011-2012年，ARL要求ARLTAB对跨部门的自动系统和网络科学两个领域的工作进行评估。
美国陆军研究实验室技术评估委员会在评估时一般会让实验室主任回答以下一些问题：
1.研究质量与国内和国际上同类领先（政府、大学和产业）实验室的可比性
2.研究项目能否反映出其对科技发展的广度的理解
3.研究是否采用了适当的实验室设备或数值模型
4.研究团队的资历是否能够应对研究面临的挑战
5.研究设施和实验时设备的领先程度
6.研究是否能够领会陆军的研究要求和分析要求
7.项目人员中的理论、计算和实验人员组成是否合理分布
8.工作是否是陆军研究实验室的主流工作
9.是否存在特别有希望的已投入足够资源的项目能产生出杰出成果并最终能够转化应用
美国陆军研究实验室技术评估委员会(ARLTAB)采用以下标准来评估ARL的科学和技术工作：
1.与科技共同体的有效互动
a.高质量期刊和会议的论文数 (以及其引用指数)
b.报告和座谈
c.专业活动的参与程度 (社团高级官员, 会议委员会，期刊编辑等)
d.教育及其延伸活动(服务研究生委员会, 教学或讲课,邀请演讲,指导学生等)
e.奖励和荣誉 (外部和内部的)
f.参与各类评估的情况(陆军研究办公室，NSF，跨学科的大学研究计划等)
g.人才招聘
h. 专利和知识产权(并举例专利和知识产权是如何应用的)
i.参与构建ARL范围的跨部门的共同体
j.公众对ARL研究工作的认知(例如，媒体或其他形式)
2.对客户的影响
a.有文件证明的技术转移，源自ARL研究工作的概念或项目对客户的帮助，联合成立短期和长期试验发展中心和工程中心(RDECs)
b.客户直接的资金支持ARL的活动
c.对ARL支持和服务有文件证明的需求(ARL的支持是否存在竞争？)
d.客户参与部门的规划
e.参与多学科，跨部门的项目情况
f.客户调查(来自客户对ARL研究价值的直接信息)
3.项目目标和规划的制定
a.ARL战略关注领域，战略规划或其他ARL需求是否明晰
b.实现目标的工作是否得到很好地落实
c.项目规划是否清晰地识别出各种依赖关系 (如其成功取决于项目内其他活动或外部进展的成功与否等)
d.如果项目是一个大范围项目的一部分，其负责人的角色是否清晰, 以及其他项目相关的项目任务和目标是否清晰?
e.标志成果识别是否合适？是否可行？
f.对技术和资源的障碍和挑战是否有清晰的认识
g.ARL的优势是否在该项目所在领域得以适当发挥
4.研究和试验发展的方法
a.假定框架在文献和理论范畴是否合适
b.对所要求的分析、原型、模型、模拟和试验是否清楚识别并且步骤恰当
c. 所采用的方法(例如，实验室工作，模型或模拟, 实地实验，分析等)是否适合该问题？这些方法是否成为一个整体？
d.对设备和器械的选择是否合理？
e.数据收集和分析方法是否恰当？
f.结果是否支持结论？
g.对进一步研究的提议是否合理？
h.对风险和潜在收益的取舍是否理性？
i.项目是否存在技术上的要求或技术创新要求？可行否？
j.什么是项目终止规则？如果满足是否采用？
5. 能力和资源
a.职员（科学、技术、管理）的资历和数量是否满足项目成功的要求?
b.是否有足够的经费满足项目成功的要求?
c.设备和设施的状态是否充分？
d.如果职员，经费和设备不能满足要求，项目将如何开展(强调哪些？牺牲哪些？)以取得最佳目标成效
e.实验室是否能维持对随时出现的关键问题快速反应的技术能力
6.对委员会建议的响应
a.以前报告中提到的问题和建议是否达到解决？
转载本文请联系原作者获取授权，同时请注明本文来自贺飞科学网博客。
链接地址：https://wap.sciencenet.cn/blog-1015-903487.html?mobile=1
收藏
