时间过短,评估易草率、马虎,无法很好地完成各项评估任务;时间过长,则易拖沓,无效率。如果是简单的、时长只有半天的研讨式或递进式桌面演练,其评估可能只占其中的半小时到一小时;如果是复杂的演练,其评估可以在一周到一个月内完成。
应急演练的目的、形式、持续时间等不同,评估的方式必然有所不同。根据应急演练的要求,评估可以采用一种方式,也可多种方式兼而用之。
参演者自我评估主要是通过参演指挥部的自我反思来完成。在评估环节,各位参演者可对自己以及整个指挥部在演练中的表现进行反思,也可以谈对整个演练过程的感受和经验。通过讨论将本次演练过程中发挥好的方面、需要改进的方面、可以采取的改进措施进行汇总,然后提交演练组织方。
参演者自我评估结束后,演练组织者(催化师和导调员)要进行总体评估,对参演者没有涉及的演练表现中的优缺点、应急演练过程中存在的问题等进行补充,提出改进的建议。在演练之后,参演者往往非常希望从演练组织者那里听到有价值的反馈信息,因此演练组织者应特别注意做好演练后的点评。
演练组织者评估可以从政策高度和理论高度对应急演练进行点评,也可以就演练中的主要问题进行点评。演练组织者的评估要建立在对整个演练过程进行充分细致的观察的基础上。评估时应注重如下要点:
(1)尽可能发动参演者进行自我评估。参加演练的参演者一般都是各个层面、各个地区、各个部门的实践者,有丰富的实践经验。演练组织者要更多地询问他们的意见,尊重他们。所以,如果时间允许,演练组织者的点评应在参演者自我反思和参演者、评估员代表发言之后。在评估发言前,演练组织者最好再次询问参演者,是否又注意到或者发现了一些新问题和建议,从中受到一定的启发。发言主要是对前面发言中没有提出或强调的内容进行补充。
(2)不同的演练组织者可发挥各自的专长,从不同角度予以点评,相互补充,力求点评得全面、详细、到位。
(3)演练组织者要注意对参演者的行为进行深入的评估,与对演练结果的点评相比,参演者的行为更值得分析评价。
(4)演练组织者要注意把握评估现场的总体氛围。演练的目的是让参演者将来有信心和能力来应对类似的突发事件,所以演练组织者要注意以鼓励的态度来进行评估,不宜过多指出参演者的错误和问题,而应指出在哪些地方还有可以继续改进和提高的潜力和空间。评估是为了提高,不是问责,要使参演者在严肃而友好的积极氛围中接受评估。
(5)对于演练组织方面的问题,演练组织者可以采取自我评估的方式进行反思和评估,也要广泛收集参演者的反馈意见。
评估员评估通常是评估组依据事前制定的评估工作方案或评估表,在演练过程中进行观察和自我评判,在演练后经过集体讨论,提出评估组评估意见。评估表的部分内容需要评估员在演练现场根据实际情况短时间内完成填写;部分内容需要演练后进行统计分析或综合分析后填写。由于评估员在演练过程中专注于观察演练、分析演练,他们的评价意见和建议,尤其是所提交的评估报告,具有独特的价值。
为了更好地评估演练效果,评估员与参演者互动是必不可少的评估环节。由于参演人员亲身经历整个演练过程,一些评估员没有留意的演练细节他们却能发现,但是参演者缺乏应急演练的评估经验,不一定能够意识到问题所在和哪些是需要评估的内容,所以需要评估员加以引导。评估员可在演练结束后向参演者统一发放反馈表,由参演者填写后交给评估员评阅;也可以向参演者发放评估问卷;还可以采用访谈的形式,对参演者提出一系列事先准备好的问题,如“你是否知道训练的演练目标和要求”“你觉得实际演练是否达到了演练方案的目标和要求”“你觉得场景是否真实”“你觉得现场的指挥人员是否指挥得当”等,帮助参演者表达对演练的意见和建议,交谈结束后,评估员对交谈的内容进行整理,并结合现场记录内容一同汇总,以便做进一步的总结和分析。