计划空间背景代码

CWO/PBC/19/3原文:英文日期:2012年7月6日计划和预算委员会第十九届会议2012年9月10日至14日,日内瓦内部审计与监督司(IAOD)关于2010-2011年计划效绩报告的审定报告秘书处编拟为帮助确保WIPO2010/11年计划效绩报告(文件WO/PBC/19/2)的可靠性和真实性,内部审计与监督司编拟了"关于计划效绩报告的审定报告".
审定报告包含了内部审计与监督司的主要调查结果、结论,以及审定工作中提出的建议.

2.
请计划和预算委员会建议WIPO成员国大会注意本文件的内容.
[后接IAOD审定报告]内部审计与监督司文号:IAOD-VALID-2012-01IAOD报告审定2010-2011年计划和效绩报告2012年7月4日目录缩略语22010/2011年计划效绩报告中定义的WIPO计划一览3内容摘要4二、计划绩效报告的审定目标6三、计划绩效报告的审定范围和方法7四、计划绩效报告的审定结果8五、计划绩效报告的审定结论16六、计划绩效报告的审定建议18七、以往审定报告中所含建议的落实情况跟踪调查20一–审定标准定义二–随机抽样会议三–审定活动会议清单四–包含评级的审定评估五–审定框架缩略语ER预期成果IAOD内部审计与监督司KPI关键效绩指标MTSP中期战略计划P&B计划和预算PD效绩数据PI效绩指标PID效绩指标数据PMPS计划管理与效绩科PMSDS效绩管理和工作人员发展系统PPR计划效绩报告RBF注重成果的框架RBM注重成果的管理RF成果框架SMART具体、可计量、可实现、相关、有时限SMT高级管理团队SRP战略调整计划TISC技术与创新支持中心TLS红绿灯系统ToR职责范围WIPO世界知识产权组织2010/2011年计划效绩报告中定义的WIPO计划一览计划1-专利计划2-商标、工业品外观设计和地理标志计划3-版权及相关权计划4-传统知识、传统文化表现形式和遗传资源计划5-PCT体系计划6-马德里、海牙和里斯本体系计划7-仲裁、调解和域名计划8-发展议程协调计划9-非洲、阿拉伯、亚洲和太平洋、拉丁美洲和加勒比国家、最不发达国家计划10-与欧洲和亚洲部分国家的合作计划11-WIPO学院计划12-国际分类与WIPO知识产权标准计划14-全球知识产权信息服务计划15-知识产权办公现代化计划16-经济研究、统计与分析计划17-树立尊重知识产权的风尚计划18-知识产权与全球挑战计划19-交流计划20-驻外办事处和对外联系计划21-执行管理计划22-财务、预算与计划管理计划23-人力资源管理与开发计划24.
4-行政支助服务计划25-信息与通信技术计划26-内部审计与监督计划27-会务与语文服务计划28-安全计划29-新建筑计划30-中小企业内容摘要1.
内部审计与监督司(IAOD)针对2010/2011两年期的计划绩效报告(PPR)开展了独立审定,这是自2008年以来所开展的第三次审定工作.
本次审定工作的目标(另参见第二部分)是:(a)为2010/2011两年期计划绩效报告所载信息的可靠性和真实性提供独立的验证;(b)通过文件证据和其他的确实证据,对上个针对计划绩效报告的审定报告所给出建议的落实状况进行跟进;以及(c)应计划管理与绩效科(PMPS)的要求,评估对成果框架(RF)的掌控程度,包括绩效措施以及利用绩效数据(PD)进行内部监测.
审定的范围(另参见第三部分)是针对每个计划随机选择一个2010/2011两年期计划绩效报告中所确立的绩效指标(PI)来进行深入分析.

2.
在所做样本选择固有局限性的范围内,本次审定工作的主要调查结果(另参见第四部分)如下:(a)所发现的若干突出优势有:(i)做出单项计划效绩报告的及时性;以及(ii)效绩数据做到有效收集且易于获得.
(b)所发现的若干突出的局限性有:(i)绩效数据不完全具有相关性;(ii)绩效数据不够充分和全面;以及(iii)成果框架主要用于对绩效进行报告,而不是用于管理和学习.
3.
本次审定工作的结论(另参见第五部分)是:相比上个两年期,2010/2011两年期计划绩效报告中的改动使预期成果(ERs)、绩效指标及合理的基准和目标得到了改进;仍有一些WIPO管理者认为对绩效指标进行报告是一种强制性的行政工作,与本组织的高级别战略和运行目标之间缺乏清晰明确的关联;尽管对绩效指标的掌控程度有所改善,但没有定期提供(例如每季度)用于在2010/2011两年期进行报告的信息来跟踪进度;成果框架的使用在一定程度上只限于发挥对绩效进行报告的作用,限制了其强化管理和学习的潜能;要进一步充实计划绩效框架和监测工具,实现预期的附加值;以及要对负责设计、规划、监测和报告绩效框架的员工进行更多的定制培训和指导.

4.
在针对2008/2009两年期计划绩效报告(文件A/48/21)的审定工作中提出的全部11项建议都已开展了行动,有3项建议得到全面落实,8项建议得到部分落实(另参见第七部分).

5.
依据WIPO各计划所提供的文件证据,IAOD作出如下建议(另参见第五和第六部分):建议1:要进一步强化绩效数据的质量保证以及数据用于计划管理(针对计划管理绩效科(PMPS)和财务与预算部门);建议2:通过在今后的计划和预算(P&B)文件中更好地界定绩效指标,实现成果框架作为报告工具和作为管理工具之间的适当平衡(从2014/2015两年期文件开始);建议3:通过举办更多的参与式促进讲习班,进一步加强注重成果的管理(RBM)和对员工的监测支持(计划管理与绩效科和绩效管理培训与发展科);以及建议4:应提前较长时间规定提交单独和合并计划绩效报告的截止日期,以便及时对2012/2013两年期的最终计划绩效报告进行审定(针对计划管理与绩效科和IAOD).

6.
IAOD注意到与2010/2011两年期相比,2012/2013两年期计划和预算文件的质量有显著提高,并预计在2014/2015两年期进一步对文件进行充实完善,以此作为注重成果的管理框架所计划改进内容的一部分,从而使绩效管理的文化在WIPO扎根.

一、导言经过批准的计划和预算文件为在本组织对计划绩效进行年度衡量提供了框架.
为此特编拟计划绩效报告并每年向WIPO计划和预算委员会(PBC)提交.
在编拟报告的过程中,要收集各计划的相关绩效数据,以便对各计划目标进行自我评价和监测.
然后计划管理与绩效科对这些数据进行合并,以便制定计划绩效报告.

此为IAOD所进行的针对计划绩效报告的第三次独立审定工作.
根据2010/2011两年期计划和预算文件的规定,本次审定针对的是WIPO各计划所制定的单项计划绩效报告.

如果想通过有效地利用绩效指标改进计划的交付和问责,完整、准确、高质量的信息至关重要.

A.
组织架构第三次审定工作是若干倡议中的一个,这些倡议旨在在本组织进一步加强成果问责制.
总体来说,本组织正在对旨在对WIPO的工作方式产生变革的19项倡议进行落实,以此作为其战略调整计划(SRP)的一部分.
作为战略调整计划的一部分,2010/2011两年期与计划绩效管理和注重成果的管理有关的若干重要成绩包括:(a)2010年完成的为期六年的中期战略计划(MTSP)对于引导本组织实现其目标起到了关键作用.
中期战略计划根据本组织的9项战略目标对组织预期结果的发展进行引导;(b)注重成果的管理框架通过一系列与战略目标关联的绩效指标和经过强化的绩效衡量框架,使两年期规划有了显著完善;(c)作为2012/2013两年期的组成部分,还持续开展了如下举措来进一步加强WIPO注重成果的管理框架:改进绩效指标;确定实际的目标、基准以及可能对计划的落实产生影响的风险.
在这方面,为WIPO员工提供了注重成果的管理方面的培训.

二、计划绩效报告的审定目标本次审定工作的目标是:(a)为载于2010/2011两年期计划绩效报告信息的可靠性和真实性提供独立的审定;(b)通过文件和其他的确实证据,对上一份针对计划绩效报告的审定报告(文件A/48/21)所作建议的落实状况进行跟进;以及(c)应计划管理与绩效科的要求,对成果框架的掌控程度进行评估,包括绩效措施以及利用绩效数据进行内部监测.

上述评估依据的是受到事实证据支持的信息以及与负责对绩效指标进行报告的骨干员工进行面谈.

三、计划绩效报告的审定范围和方法7.
审定的范围涵盖针对每个计划随机选择一个2010/2011两年期计划绩效报告中所包含的绩效指标,对其进行深入分析.
所使用的对单项计划绩效报告进行审定的标准是:相关和有价值;充分和全面;有效收集和易于获取;一致性和可比较;准确和可验证;及时;清楚明确和透明;高效和可及性;红绿灯系统标识(TLS)的准确性和全面性.
除了上述标准,还有两个额外补充的标准被认为对于支持注重成果的管理的发展和完善具有价值.
它们是:(a)对成果框架的掌控感;以及(b)利用成果框架和绩效数据进行内部管理和报告.
8.
审定标准详见本报告的一.
A.
事先提供的信息9.
在开始审定工作之前事先提供或传播了如下信息:(a)在2012年2月24日提供了一份计划绩效报告和审定工作简报;(b)负责行政和管理部门的助理总干事(ADG)在2012年2月17日向所有高级管理者发送了一份备忘录;以及(c)IAOD在2012年3月19日发送了一份有关独立审定工作关键步骤和日期的备忘录.

B.
随机抽样10.
审定小组在本次审定工作中把"2008/2009两年期计划绩效报告"所作出的建议考虑在内,该报告写道"对预期成果进行随机抽样与筛选法相比更为省时,并能更好地反映出数据的质量".

11.
由WIPO高级管理层(SMT)的各成员或其代表在IAOD员工在场的情况下对每个计划的绩效指标进行随机抽样.
代表的姓名名单载于本报告的二.
随机抽取的绩效指标数量占2010/2011两年期计划和预算文件所规定指标总数的10%(303个绩效指标中的29个).
包括随机抽取的指标列表在内的审定评估见四.

12.
WIPO要求高级管理层或其代表通过如下举措为审定小组的工作提供便利:(a)保留足够的记录;以及(b)使审定小组能够获得所有的既有绩效数据.
审定小组安排举行会议,以便对照所选定的绩效指标对用于监测所报告进展情况的绩效数据进行讨论.

13.
考虑到讨论绩效措施、数据和文件量的优势和不足所需的时间,在需要时对各样本的绩效数据进行交叉检查和核实.

C.
通知选定的绩效指标14.
在2012年3月19日至20日正式向各计划管理者、代表、负责对绩效指标进行报告的人员以及计划管理与绩效科通知了随机抽取的绩效指标,要求他们在审定会议前编拟所有与审定随机抽取的绩效指标有关的支持文件.

D.
举行审定会议,开展单项计划审定评估15.
为了深入了解计划绩效报告中信息的使用情况和之前审定工作所作建议的落实情况,要求负责对照绩效指标进行报告的员工出席审定会议.
审定小组总共访问了42名专业员工.

16.
审定会议于2012年4月5日至5月4日召开.
为了系统地开展访问,根据之前审定工作的范例以及考虑到计划管理与绩效科等关键利益攸关方的要求,制订了访问章程.

17.
对所有访问进行了记录并打印成文,以便为载于本报告的结论提供全面的证据和依据.

18.
所记录的访问和单项计划审定评估被作为载于本报告的调查结果和结论的信息来源.

向负责对照绩效指标进行报告的人员和WIPO高级管理者送交了单项审定评估和报告草案,以便征19.

集他们的反馈和评论意见.
酌情对事实性的错误进行了更正,并对报告草案进行了相应的修订.

E.
局限性20.
审定工作的主要局限性与使用的方法有关.
对随机抽取的绩效指标样本进行审定所得出的调查结果、结论和建议不一定能够全面反映整个注重成果的管理框架.
但考虑到时间限制和本组织的需求,随机抽样是评估绩效数据质量最适当的方法,该方法可以在合理的时间段内实现充分深入的评估,符合之前审定工作所给出的建议,并为WIPO管理层所接受.

四、计划绩效报告的审定结果21.
以下列出的调查结果是单项计划审定评估的结果,这些评估针对的是随机选取的绩效指标及其对应的绩效数据,以及在29个计划中受访的42名专业员工的意见,他们负责对随机选取的绩效指标进行报告.

A.
总体的审定结果22.
通过对绩效数据和用于对绩效指标进行报告的信息进行审定,所发现的最为突出的优势是:(a)在100%的情况下及时地做出计划效绩报告;以及(b)在62%的情况下效绩数据做到有效收集且易于获得.
23.
其他领域在很大程度上也具有优势,但一些突出的局限性包括:(a)在70%的情况下绩效数据不完全具有相关性;以及(b)在52%的情况下绩效数据不充分/全面.
标准充分达标部分达标未达标相关/有价值8个计划(27%)20个计划(70%)1个计划(3%)充分/全面14个计划(48%)12个计划(42%)3个计划(10%)有效收集/易于获取18个计划(62%)9个计划(31%)2个计划(7%)一致性/可比较16个计划(55%)13个计划(45%)0个计划(3%)准确/可验证17个计划(59%)10个计划(34%)2个计划(7%)及时报告29个计划(100%)0个计划(0%)0个计划(0%)清楚/透明16个计划(55%)12个计划(42%)1个计划(3%)红绿灯系统标识的准确性16个计划(55%)10个计划(35%)3个计划(10%)其他(受访者的意见)是否对注重成果的框架的掌控感20个计划(69%)9个计划(31%)利用成果框架和绩效数据定期开展内部监测16个计划(55%)13个计划(45%)根据在与计划管理与绩效科交流的过程中所提出的建议,在2008/2009两年期与2010/2011两年期之间进行了比较(参见下图),从而显示审定结果.
但重要的是要注意对2010/2011两年期计划绩效报告所进行的审定工作采用了不同的方法对绩效指标进行抽样.
本次审定工作对绩效指标进行了随机抽样,更为全面地反映出本组织内部绩效数据、绩效指标和监测工具的质量,而不是像对上一份计划绩效报告所进行的审定工作那样,即只选择那些符合特定、可衡量、可实现、相关、有时间限制(SMART)标准的绩效指标和绩效数据.
所以在2010/2011两年期计划绩效报告的审定中,未充分达到审定标准的计划数量略高于2008/2009两年期的水平,而成果框架的落实到位程度和把成果框架和绩效数据用于内部监测方面与2008/2009两年期相比有所改善.

B.
按标准开列的审定结果(i)相关/有价值(8个充分达标/20个部分达标/1个未达标)25.
此标准旨在确定用于对绩效指标和预期成果进行报告的信息以及整个计划交付的相关性和价值,特别是为了衡量具有意义的进展和预期成功.
它还评估绩效数据的量化和报告是否包含符合如下条件的信息,即涵盖体现在预期成果和绩效指标中的绩效的所有重要方面.

26.
对于所抽取的绩效指标样本,占总数27%的计划提供了充分达到此标准的绩效数据,而70%的计划部分达到此标准.
只有一个计划没有达到此标准(3%).

27.
所发现的优良实践范例:计划7、18、24.
4和29为有效地进行报告提供了准确、全面、有价值的绩效数据和信息;得以对数据的质量进行有效充分的评估,并且绩效指标和预期成果之间存在着清晰明确的关联.

28.
在其他计划中发现的局限性的示例:随机选择的绩效指标定义模糊,使得衡量和报告进展遇到困难;根据绩效指标收集到的绩效数据对于衡量绩效不具有价值;没有对可衡量的基准和目标进行清楚明确的定义;在有些情况中,计划管理与绩效科未与相关计划进行磋商就修改了绩效指标;为审定工作提供的一些信息虽然具有相关性,但没有被用于对绩效指标进行报告;以及对产出而不是成果和影响进行了衡量.
(ii)充分/全面(14个充分达标/12个部分达标/3个未达标)29.
此标准进行如下评估:绩效数据是否包含充分全面的信息来反映绩效措施所取得的进展,以及绩效数据是否包含所有的既有信息来进行评估.

30.
总体来说,有45%的计划为有效地衡量所选定的绩效指标和预期成果提供了足够充分和全面的绩效数据.
但有45%的计划所提供的绩效数据不充分,因为无法直接利用这些数据比照预期成果对进展进行评估.
此外,有10%的计划不能为衡量预期进展提供任何文件材料,或是所提供的用于衡量的绩效数据十分有限,造成几乎不可能比照绩效指标对进展进行评估.

31.
所发现的优良实践范例:在对此标准进行评估时,计划7、12、17和29可作为优良范例.
它们的活动记录全面充分,有利于依据事实性证据比照绩效指标对进展进行衡量.
还在WIPO网站和内部网站上全面提供了绩效数据.

32.
所发现的局限性的示例:对绩效指标起支持作用的绩效数据没有被全部记录下来,也没有用于比照预期成果对绩效指标的所有方面进行评估;计划侧重于收集和报告定量的绩效数据,但绩效指标要求对绩效数据定性和定量的部分都进行报告;存在支持绩效指标的绩效数据,但未被包含在单项计划绩效报告中;由于所计划活动的延期开展,没有绩效数据能够支持绩效指标;以及绩效数据中的信息过于模糊和/或笼统,无法对绩效指标起到支持作用.
(iii)有效收集/易于获得(18个充分达标/9个部分达标/2个未达标)33.
此标准评估的是绩效数据是否得到有效收集并易于获得,以及是否建立了适当的体系对绩效数据进行记录、获得、报告和分析.

34.
62%的计划通过建立起能够有效高效地收集、分析和报告数据的体系实现了充分达标,而有31%的计划所提供的绩效数据为部分达标,原因是未能易于获得和/或有效收集绩效数据.
7%的计划或是没有建立起高效有效收集和分析绩效数据的体系,或是绩效数据不易于获得.

35.
所发现的优良实践范例:计划6、7、12、20、24.
4、27和29建立了有效高效记录、收集和分析绩效数据的体系,还在WIPO的内部网络和外部网站上提供了易于获得的绩效数据.

36.
所发现的局限性的示例:没有建立起定期对绩效数据进行收集、分析和报告的体系;绩效数据被存储在不同的文档和/或单独的数据库中,要对它们进行有效的收集或合并需要耗费较长的时间;以及有的计划依靠其他计划告知事件/活动.
由于缺乏有效的信息流动制度,很有可能出现漏报的现象.

(iv)一致性/可比较(16个充分达标/13个部分达标/0个未达标)37.
此标准的目的是为了评估报告上来的数据是否具有足够的一致性,从而能够在更长的时间段中对绩效进行衡量和比较.
一致性的原则不应妨碍在出现更为准确的程序或方法时对其进行使用.
但对于任何程序和方法上的变动,应如实记录在案,并说明原因.

38.
55%的计划提供了能够在各两年期之间进行比较的绩效数据,数据提交的方式保持了前后一致.
在另一方面,42%的计划所提供的绩效数据出现了较大的改动或已终止提供,原因是绩效指标在前后两个两年期之间出现了较大的变化或是被终止.
在这些情况中,没有以透明的方式将上述变动记录在案或对其说明原因.

局限性的示例:(a)如上个针对2008/2009两年期计划绩效报告的审定报告所述,前后两个两年期的预期成果和绩效指标继续有所变化.
也许这可以被理解为是注重成果的管理框架经历的一个充实完善的积极过程.
因此,可以把不同时期之间不具有可比性看作是一种改进而不是一种局限性.
多数情况下,变化的出现使预期成果和绩效指标得到改进,并使基准和目标变得实际、可衡量.
WIPO注重成果的管理仍处于发展阶段,因此将进一步完善预期成果、绩效指标和其他绩效措施,直到注重成果的管理框架和绩效管理文化在本组织上下得到确立.

40.
所发现的优良实践范例:计划27和29在整个两年期阶段持续不断地对绩效指标进行报告,以此作为年度大会报告工作的一部分,这有助于比照选定的绩效指标对所取得的进展作出有效的比较.

(v)准确/可验证(17个充分达标/10个部分达标/2个未达标)41.
此标准用于评估是否有清楚明确的文件材料支持绩效数据,从而对产生绩效措施的程序进行准确的审定.

42.
59%的计划通过使用文件材料,提供了准确、可验证的绩效数据和相关信息,还在WIPO的内部和外部网站上提供了这些数据和信息.
在另一方面,34%的计划所提供的绩效数据不易验证或不准确.
在7%的计划中,用于对绩效指标和预期成果进行报告的绩效数据或是不可验证或是不准确.

43.
所发现的局限性的示例:未能直接对绩效数据进行验证,因为信息的存储缺乏条理和一致性;以及由于缺少相关的文件材料,无法对绩效数据进行准确的验证.
44.
所发现的优良实践范例:绩效数据准确、可验证并可用于报告.
数据还在WIPO内部网络和外部网站上提供.
可作为优良范例的计划是计划3、7、26、27和29.

(vi)及时报告(29个充分达标/0个部分达标/0个未达标)45.
此标准用于验证是否定期生成数据以便跟踪进展,以及数据生成的速度是否足够迅速,使其仍然具有意义.

46.
所有计划都充分达到了此标准.
如对2008/2009两年期计划绩效报告的审定工作已提出的那样,由于没有要求(58%的计划)比照绩效指标对进展进行常规或定期报告,只有很少的证据证明存在未及时报告的现象.
只有28%的计划被要求向发展与知识产权委员会(CDIP)、独立咨询监督委员会(IAOC)等委员会或向高级管理层报告,但其中只有很少的几个计划被要求对计划和预算文件的成果框架进行进展成绩的报告.

47.
要注意的是,根据对2008/2009两年期计划绩效报告(文件A/48/21)的审定工作所作出的建议,本组织2009年开始实行每季度向高级管理层进行报告的常规要求.
但正如受访的WIPO员工所述,计划管理者既没有把这些报告用于决策过程,也没有用于内部监测.
因此在实行了一段时间后就被终止了.

48.
所发现的优良实践范例:定期生成绩效数据以便跟踪进展,因为在生成数据的部门中进行内部监测、管理和决策事要使用到这些数据.
计划7、15、23、24.
4和29提供了很好的范例,即在把绩效数据用于管理和决策的情况下,及时对数据进行报告具有重要意义.
在计划7和15的情况中,两个计划都建立了完善的监测体系并定期进行更新,为在最大程度上及时、高效地报告极为相关的信息提供了便利,并同时把数据用于管理和决策.

(vii)清楚/透明(16个充分达标/12个部分达标/1个未达标)49.
此标准评估所公布的信息是否能让预期的使用者理解并以合理的信心作出决策.
透明的标准是指,依据事实性证据认为对哪些信息以开放、清楚、事实性、公正和协调一致的方式进行报告.
记录、汇编和分析信息的方式应使内部的审查人员和外部的预期使用者能够检验信息的可信性.

50.
55%的计划提供了清楚透明的绩效数据,而另外45%的计划所提供的绩效数据没有全部做到清楚、事实性和协调一致.
有若干计划对大量记录进行了汇编,但并未对其进行清楚、协调一致的分析.

51.
所发现的优良实践范例:在计划绩效报告中对绩效数据进行清楚透明的报告,并在互联网上公开信息.
计划开发了必要的监测工具和体系,从而清楚、公正、事实性地对信息进行记录、汇编和分析.

计划7、14、24.
4、25、29和30很成功地做到了清楚透明地进行报告.
52.
所发现的局限性的示例:(a)必须借助WIPO外部利益攸关方的力量才能对信息进行收集,有些信息不够清楚明确,从而造成透明性和清晰度下降;(b)信息清楚透明,但不全面,原因是计划绩效报告中的绩效数据不全面;(c)信息得到公开,但缺乏协调一致;以及(d)只要求将信息用于对计划绩效报告进行报告而没有任何其他目的,而且没有人检查为了对绩效指标和预期成果进行报告,记录是否清晰,绩效数据是否清楚并以透明的方式收集.

(viii)红绿灯系统标识的准确性(16个充分达标/10个部分达标/3个未达标)53.
红绿灯系统标识有其单独的作用,在严格意义上不是绩效数据的一部分.
对所抽取的绩效指标样本的准确性进行了评估,依据的是能否根据绩效数据所包含的信息证明自我评估等级的合理性,该绩效数据是2010/2011两年期计划绩效报告的一部分.

54.
在审定中发现55%的计划中红绿灯系统标识是正确的.
与之相反,约有45%的计划比照选定指标高估了其绩效.
事实表明,如果没有给出目标和基准的定义或绩效指标不符合SMART标准,则难以对绩效进行衡量.
绩效指标含糊不清的例子有计算决定的数量、增长的辩论数量或程序的数量.
在这种情况下,即便是一个微小的增长也会被算作是成绩,但却未把改进的质量考虑在内.

55.
所发现的局限性的示例:对于那些要求进行成果/影响分析的绩效指标,在设计成果框架时没有开发必要的监测工具;没有给出基准和目标的定义;绩效指标指的是增长的国家、决定、参与方等参数的数量,但没有提供基准或目标;把成果归功于计划的努力受到质疑;没有开发监测体系和工具;以及收集监测数据的目的不是为了对绩效指标和预期成果进行有意义的报告.

(ix)成果框架用于内部管理和绩效报告(16个是/13个否)56.
为了评估成果框架的使用情况,审定利用了得到国际承认的注重成果的管理的定义.
如世界银行给出的定义,注重成果的管理的目标是,依据学习和问责,为战略性规划和管理提供一个协调一致的框架,从而完善管理的有效性.
成果框架首先作为管理体系然后作为绩效报告体系来使用.

57.
与之前的审定工作一样,本次审定请负责对随机选取的绩效指标进行报告的员工评估其成果框架的利用水平.
根据访问结果,55%的计划认为包括高级管理层在内的不同利益攸关方将所报告的信息用于决策.
与2008/2009两年期21%的计划相比,成果框架的利用水平得到了重要提升.

58.
但是,当相同的回复者被问到他们自己是否把信息用于计划具体的决策时,只有20%的回复者给出了肯定的回答.
这表明掌控感的加强不一定意味着会更多地把信息用于内部管理和决策.
两者之间缺乏关联的原因可能是按计划开列的成果框架:(a)在多数情况下是不同利益攸关方之间达成折中的结果;以及(b)在一开始被实施者制定出来之后,其他的非参与方无需事先通知就可以对其进行改动.

59.
下表显示了绩效数据使用者、目的和报告的概况:60.
所发现的最佳实践的范例:通过与负责员工的密切合作,在计划内部建立起对于管理和决策至关重要的成果框架和监测体系.
计划7、11、15、24.
4和29就是这种情况.
这些计划参与了其监测工具和报告的开发,并定期使用该信息作为其日常工作的一部分.

61.
所发现的局限性的示例:(a)要求定期报告,但未提供对报告的反馈,并且报告没有用于任何决策.
因此报告被看作是一种负担;(b)制定监测工具和报告只是为了对计划绩效报告进行报告;以及(c)在内部所建立的监测体系/数据库在多数情况下的确对信息进行汇编,但它们不一定为分析数据提供便利.
WIKIIT工具就是这种情况,即员工利用它汇编绩效数据和记录,但未被设计成一个监测工具.
在审定过程中发现了其他监测工具,但其中多数工具在试图通过分析绩效数据作出决策时都显示出局限性.

(x)对注重成果的框架的掌控感(20个是/9个否)62.
与之前的审定工作一样,此项请那些负责对随机选取的绩效指标进行报告的员工确定:成果框架在多大程度上是由他们设计的;他们是否对成果框架感到具有掌控感;他们是否感到本组织在这个过程中为他们提供了支持;以及掌控感是否意味着把成果框架用于决策.
63.
根据访问的结果,掌控程度从2008/2009两年期的34%大幅提高至2010/2011两年期的69%.
大约66%的回复者表示,本组织为他们选择/设计成果框架并与更高级别的中期战略目标进行关联提供了指导.
根据访问说明,24%的回复者表示,在建立成果框架的过程中向他们提供了一对一的培训和/或指导.

64.
对对绩效指标的掌控感造成一定负面影响的关键因素是:(a)频繁的组织架构变动,造成员工接手不是他们设计的绩效指标和预期成果;以及(b)有些员工感到那些在设计阶段被确定下来的绩效指标在绩效的定案阶段未经其本人同意就被修改.

65.
受访的管理者所确认的最佳实践范例:与负责员工密切合作建立成果框架和监测体系,成果框架和监测体系对于计划内部的管理和决策至关重要,以及本组织所提供的指导被评为是有帮助有意义的.
计划7显然是这种情况.

66.
受访管理者所强调的局限性的示例:本组织所提供的注重成果的管理培训被认为过于笼统;与负责员工一起建立成果框架并提供了支持,但没有提供监测指导(用于收集数据、监测体系等的工具);管理者要接手绩效指标的工作,而那些建立了成果框架的员工已离开本组织或计划;那些由负责落实活动的员工所制定的绩效指标未与相关计划进行磋商就被修改;要求处理复杂问题的计划根据一个线性的成果框架开展工作;成果框架是折中的结果,因为内部和外部对于信息的需求都要得到满足;成果框架被看作是一项行政工作;以及未通过参与性的方式建立成果框架,原因是时间限制,例如紧迫的任务期限.

五、计划绩效报告的审定结论67.
在29个计划中,有20个计划(70%)所提供的绩效数据具有部分的相关性和价值,而只有8个计划(27%)所提供的绩效数据充分达到此标准.
此外,把收集到的绩效数据用于对绩效指标进行报告只限于对绩效进行报告的作用,没有用于管理和学习目的.
具体来说,审定工作的结论是:(a)20%的计划管理者认为对绩效指标进行报告是一项强制性的行政程序,它造成了掌控水平低以及框架用于管理的情况受到限制的问题;(b)绩效指标和监测工具的设计经常有缺陷,因此对比照计划目标衡量进展的工作几乎没有价值;以及(c)有必要为负责设计、规划、监测和报告绩效框架的绩效指标的员工举办促进讲习班和提供指导.

A.
被认为是一项行政程序的计划绩效报告68.
计划的员工没有充分地参与设计成果框架会对绩效措施产生直接影响,使它们既不相关/有价值,也没有在界定明确的低级别指标和高级别战略性指标之间建立起因果联系.
与比较复杂的准则制定活动有关的绩效指标尤其可能出现这种情况,需要各成员国为推动包括制定绩效措施在内的进程发挥积极作用.

69.
负责报告的员工对于计划成果框架和绩效数据的实际利用水平在WIPO内部仍然较低,原因是没有把成果框架看成是并开发为一个规划和管理工具,而是把它作为进行行政报告的工具.
此外,没有完全做到定期提供用于报告的绩效数据和信息,造成无法跟踪进展,计划和预算文件中议定的绩效措施对于管理、决策和学习来说不一定具有意义和价值.
这反映在通过将绩效措施纳入提交给高级管理层的季报来实现进一步把绩效措施用于管理目的的尝试以失败告终.

B.
设计有缺陷的计划绩效措施和监测工具70.
所审查的样本显示,45%的WIPO计划面临为支持绩效措施而收集、分析和提供充分全面数据的挑战.
大多数受访的利益攸关方认为原因主要是因为缺乏:(a)对于计划绩效管理重要性的充分认识;(b)在计划交付中衡量进展并不断进行完善;以及(c)适当的管理工具为更好地收集、监测和分析绩效数据提供便利.
71.
绩效措施不够完善以及没有针对非常复杂的绩效指标的监测和报告进行指导,这些给报告所用信息的清晰性和透明性造成了负面的影响.

72.
在对2010/2011计划绩效报告进行审定的过程中发现的会削弱对绩效指标的掌控感的关键因素是:(a)频繁的组织架构变动,造成员工接手不是他们设计的绩效指标和预期成果;以及(b)有些员工感到那些在设计阶段被确定下来的绩效指标在绩效框架的定案阶段未经其本人同意就被修改.

C.
绩效管理的文化仍在逐渐发展73.
如上个针对2008/2009两年期计划绩效报告的审定报告所述,前后两个两年期的预期成果和绩效指标继续有所变化.
也许这可以被理解为是注重成果的管理框架经历的一个不断充实完善的积极过程,而并非是一种局限性.
多数情况下,变化的出现使预期成果和绩效指标得到改进,并使基准和目标变得实际、可衡量.
WIPO注重成果的管理仍处于发展阶段,因此将进一步完善预期成果、绩效指标和其他绩效措施,直到注重成果的管理框架和绩效管理文化在本组织上下得到确立.
IAOD注意到,与2010/2011两年期相比,2012/2013两年期计划和预算文件的质量有显著提高,预计在2014/2015两年期将会进一步对文件充实完善,以此作为注重成果的管理框架所计划改进内容的一部分,从而使绩效管理的文化扎根于WIPO.

D.
在绩效框架和监测工具的设计阶段没有举办促进讲习班74.
向员工提供了注重成果的管理培训,但开展的是标准化的培训,限制了在有利环境中对成果框架的参与和掌控.

六、计划绩效报告的审定建议75.
依据不同WIPO计划所提供的文件证据以及与负责落实随机选取的绩效指标的员工所开展的磋商,特作出如下建议:76.
建议1:绩效数据的质量保证在2012/2013两年期要通过提高成果框架的质量和相关性进一步得到强化(针对计划管理与绩效科和财务与预算部门).

77.
根据其任务授权的要求,计划管理与绩效科通过与首席财务官办公室的密切合作,应牵头建立起完善的监测体系,以便对成果框架和计划绩效报告提供有效的质量保证,以期在本组织上下更为有效地落实计划交付.

78.
只有在成果框架和所需的信息有意义并用于决策目的的情况下,定期向管理层报告才对管理层有帮助.
因此,为了改善成果框架和绩效数据的质量,应考虑如下事项:(a)计划应从一开始就设定明确的目标,并且应在高级别和低级别指标之间建立起因果联系;(b)绩效措施应包含SMART预期成果、绩效指标以及实际的基准和目标;(c)监测体系应充分、有用、相关和高效地对数据进行收集、分析和报告;以及(d)如审定标准所述,应准确透明地对绩效进行报告.
这其中包括红绿灯系统的准确性.

79.
建议2:通过确定SMART绩效措施,实现成果框架作为报告工具和作为管理工具之间的适当平衡(针对计划管理与绩效科和绩效措施);80.
为了实现如下两者之间的平衡:(a)出于管理的目的对绩效进行报告;以及(b)出于决策和学习的目的.
81.
今后计划和预算文件(从2014/2015两年期开始)中规定的绩效措施应与如下措施相同:(a)绩效措施用于内部管理和监测目的;以及(b)绩效措施认为在用于决策目的的情况下相关.
82.
对成果框架更为平衡的利用将为加强对成果框架和绩效数据的掌控和更好地利用成果框架和绩效数据作出贡献.

83.
建议3:通过举办促进讲习班,加强对计划管理者和员工的监测支持和指导,从而设计、完善和落实SMART绩效措施,并加强本组织注重成果的管理(计划管理与绩效科和绩效管理培训与发展科).

84.
高级管理层要采取参与性更强的方式,增强计划管理者和员工对于设计、修改、落实绩效措施和监测体系/工具的认同,这将进一步提升对成果框架的掌控感,强化成果框架的有效利用.

85.
包括促进讲习班在内的互动式培训计划应成为成果框架定期落实计划的一部分,以期:(a)对在低级别产出指标和高级别成果/影响指标之间建立起明确合理的因果联系的SMART绩效指标进行确立;(b)确定实际的基准和目标,以便比照绩效措施衡量进展;(c)就如何在整个两年期最好地落实和改进计划交付提供指导;以及(d)设计监测体系和工具,使计划能够收集、分析和报告绩效措施.
86.
建议4:应提前较长时间规定提交单项和合并计划绩效报告的截止日期,以便对2012/2013两年期的最终计划绩效报告进行审定(针对计划管理与绩效科和IAOD).

87.
为了向成员国保证计划绩效报告的准确性和全面性,在设定时间安排时应确保能够针对最终的计划绩效报告开展独立审定.

七、以往审定报告中所含建议的落实情况跟踪调查完全落实部分落实没有落实2008年计划效绩报告与2008/09年计划效绩报告的审定报告中所含建议落实情况关于建议落实情况的意见建议1:应当进行一次审查,确定如何更多地利用效绩指标数据(效绩指标数据).
根据高层管理人员对此项工作的重视程度,应当准备并鼓励采用更加强大的监测系统,把成果法与日常管理工作切实地结合起来,对补充在财务规划和向成员国报告方面基于成果的管理(RBM)这一现有重点.

29位受访者中有55%认为,以往计划效绩报告(PPR)中所建议的审查已经实施.
按照建议,2010年举办了研讨会.
整体而言,受访者表示,成果框架(RF)与战略目标更为切合,2012/2013年度的效绩指标(效绩指标)更有可度量性.

总体来说,在比照效绩指标进行报告的受访者中有55%认为,高层管理团队(SMT)等各利益相关者利用报告所包含的信息进行决策.
但是,比照效绩指标进行报告者(20%)则不一定利用报告所包含的信息.
按季度比照这些措施进行报告的做法已经终止使用.

一俟对于效绩数据(PD)定期使用情况的审查完成,而且正在开发的更加强大的监测系统到位,即认为该建议得到落实.

建议2:一旦效绩指标数据越来越多地用于内部监测,监督管理者在支持开发和维护有力的监测系统方面就应当发挥更加明显的作用.
他们还将对各项计划目标与组织总体战略目标之间建立紧密而明确的联系产生影响.

如上文建议1中所述,大约45%的计划不用效绩指标数据进行内部监测.
因此,2010/2011两年期,监督管理者未在支持开发和维护健全的监测系统方面发挥更加明显的作用.
在2012/2013两年期计划和预算(计划和预算)文件中,预期成果(ER)和效绩指标与组织战略目标之间已经建立了紧密而明确的联系.
一俟计划管理者将效绩数据用于内部监测,而且健全的监测系统到位,即认为该建议完全落实.

2008年计划效绩报告与2008/09年计划效绩报告的审定报告中所含建议落实情况关于建议落实情况的意见建议3:给予监督管理者、执行管理者及其团队的具体支持应当包括:为开发适当的、计算机化的数据收集、分析和报告工具提供更多的技术支持;审定结果和访谈显示,对于开发适当的、计算机化数据收集、分析和报告工具这项工作,仅38%的受访者得到过技术支持.
但是,通过审定发现,虽然缺乏高效、实用、统一的监测工具以便进行数据分析与报告,一些计划已经开始建立自己的监测系统.
值得注意的是,29个计划中有5个,其工作人员表示效绩指标简单明了,不必采用此类监测系统.
尽管如此,该建议仍需落实,确保在适当的、计算机化数据收集、分析和报告工具方面,所有计划均得到充分的支持.

建议4:给予监督管理者、执行管理者及其团队的具体支持应当包括:如有可能,在拟议的客户服务倡议的基础上,搭建一个适当的系统,支持数据收集,而且最好能够协调各个计划的数据整理和分析.
只有当该系统建起后,才可以把客户/用户反馈作为一项有用的效绩定性评价指标加以利用.

(针对计划管理与效绩科和高层管理团队中负责客户服务的成员)45%的受访者表示该建议已经落实.
但是,在审定过程中,未发现本组织与此有关的书面记录.
总体来看,审定结果发现,在近20个效绩指标中,必需为2012/2013两年期收集反馈信息.
不过,到目前为止,没有哪个计划,或是哪个统一负责的中心部门着手对数据收集进行协调.
工作人员尚不清楚如何完成此项任务,也没有中心部门与之联系商讨具体的方案.

一俟所有计划均配备了适当的数据收集系统,即认为该建议得到落实.
建议5:给予监督管理者、执行管理者及其团队的具体支持应当包括:继续开展一对一培训和咨询,以便受训者了解和应用效绩规划与监测系统的良好做法标准.

虽然RBM培训已经实施,但是仅有24%的受访者表示自己参加过一对一培训.
计划管理与效绩科(PMPS)称,一对一辅导作为日常工作,将持续开展.
然而,这也许不是满足培训需求的最具成本效益的方法,以后还会进一步开办讲习班.

整体来看,工作人员对于PMPS在此方面所给予的支持相当满意.
共有110名工作人员参加了PMPS的培训.
为各计划开办讲习班并提供指导之后,即认为该建议完全落实.

2008年计划效绩报告与2008/09年计划效绩报告的审定报告中所含建议落实情况关于建议落实情况的意见建议6:给予监督管理者、执行管理者及其团队的具体支持应当包括:开发监测工具,让高层管理人员能定期(例如每季度)比照主要目标与指标掌握总体进度.

根据计划和预算的效绩措施,清楚明白地汇报工作进展,此项工作应当纳入向SMT提交的季度报告之中.
但是,考虑到现行效绩框架的复杂性,目前采取此种做法可能存在困难.

仅有20%的受访者认为该建议得到落实.
本组织引入了季报制度,但之后不久,即终止使用.

需要注意的是,只有开发出同时用于报告和管理的成果框架,该建议才有意义.
(见前述建议)建议仍需落实.
根据效绩评价指标,按季向SMT汇报进度之后,即认为该建议得到落实.

建议7:应当优先考虑在2010/2011两年期深入评估这些(效绩)措施的质量和适当性,以便为下一个两年期设定数量更少但意义更大的目的、指标和目标.
就中期战略计划(MTSP)而言,实施"平衡记分卡"方法可能非常有益;(针对SMT)约有65%的受访者认为该建议得到落实.
有迹象表明2012/2013两年期的计划和预算文件已经改善,指标和目标的数量均有减少.
此次审定无法对2012/2013两年期成果框架的质量进行评估.

将近97%的受访者不知是否已开发出对照MTSP跟踪进度的体系或衡量进展的方法.
审定期间未发现任何书面证据.

一俟对照MTSP跟踪进度的监测系统到位,内部审计与监督司(IAOD)即认为该建议得到落实.

建议8:为鼓励采取更有活力、更富挑战的效绩措施,在制定具体目的、指标和目标时,还应当一并明确哪些前提假定和风险会影响成果的实现;(针对PMPS)2012/2013两年期计划和预算文件已对前提假定和风险做出界定.
该建议完全落实.
建议9:管理者对审定过程更加熟悉,审定预期成果的实际可能性也有所提高.
因此,应当随机抽取而非筛选抽取预期成果样本,从而更加真实地反应报告质量;(针对IAOD)在IAOD的监督下,计划管理者或其代表为每个计划随机抽取了一个效绩指标,用于2010/2011两年期计划效绩报告(PPR)的审定.

审定活动确实为每个计划随机抽取了一个效绩指标,而非预期成果.
该建议完全落实.

建议10:应当制定完成分项计划效绩报告(PPR)和总体PPR的详细时间表(针对计划管理与效绩科)为PPR的完成和审定制定一份清晰且为各方认可的时间表,此举将有助于确保分配足够的时间,先后而不是同期开展这两项工作.

目前,分项PPR和总体PPR的编制同步进行.
因此,IAOD无法对最终定稿的PPR进行审定.
如果为PPR的完成和审定设置一份清晰且为各方认可的时间表,以便分配足够的时间先后而非同步开展这两项工作,IAOD即认为该建议得到落实.

2008年计划效绩报告与2008/09年计划效绩报告的审定报告中所含建议落实情况关于建议落实情况的意见建议11:不建议对2010-2011年计划和预算中的2010年中期PPR进行审定.
目前,效绩框架按照每两年对效绩进行一次评估而设计,中期成果审定未必有用.
如果预算和效绩的详细框架按年制定,则对此政策进行修改.
(针对IAOD)依照建议,审定工作每两年开展一次.
[后接]审定标准定义为便于审定工作的开展,审定小组采用了英国国家审计署建立的"数据系统优良实践标准"的改编版.
用于报告计划执行的效绩数据(PD)和信息应当做到:相关且有价值——与本组织根据效绩措施力图实现的目标相关且对其有价值.
量化分析与报告应当包括涵盖预期成果(ER)和效绩指标(PI)所体现效绩的全部重要方面的信息.
数据收集方法、标准和前提假定不应引起误解.
对审定意见没有影响的数据和前提假定不应包括在内.

充分/全面——对照效绩措施,充分、全面地展现所取得的进展.
效绩数据应包括可用以比照效绩措施进行全面评估和报告的一切信息.

有效收集/易于获取——应建立适当的制度,来记录、评估、报告和分析比照效绩措施进行报告所需的数据.

一致/可比——信息应集中于具有可比性且可帮助进行有意义对比的关键效绩指标.
当出现更为精确的程序或方法时,一致性原则不应妨碍其使用.
但是,程序和方法的任何改变都应清楚地加以记录和解释.
一致性通过以下方式得到保证:在不同时期一致采用各项方法要求;在特性相似的项目和计划中使用相似的指导和知识,例如适用的方法,使用的技术,时间范围和相似的区域等;对于不同的基准情景同等适用检验标准(tests)和前提假定(assumptions);确保各项原则同等地适用于内部或外部专家判断、不同时期以及各项目和计划.

只有当前的信息与以往或者别处类似计划的信息存在连续性,才具有可比性.
评估的可比性和连续性之所以重要,有几个原因.
第一,改善计划效绩可能涉及重大的、结构性的改变.
这些改变无法在短期内实现,通常需要一段时间生根,而后才能开始影响结果.
第二,改变计划效绩的评估方式会使员工迷惑、失去重心、对工作方向不确定.
第三,拥有大量具有可比性的信息,对于评价本组织的工作质量有帮助.
如果计划改变了正在评估的内容,将难以按年进行对比;准确/可验证——信息准确且可验证,足以达到使用目的,反映变化并记录变化过程,以便于审定产生变革的过程.
准确原则要求在可行的基础上,尽可能减少偏差和不确定性.
与审定相关的准确性和可验证性在以下两个层面均需得到保.

其一与量化数据和信息的准确性和书面文件/记录(即实物证据)有关;其二与非量化信息的准确性和书面文件/记录(即实物证据)有关.
及时——信息生成的频率足以跟踪进度,信息生成的速度足以确保信息的时效性.

清楚/透明——披露信息,使目标用户理解并据此相当自信地做出决定.
透明涉及人们对依据书面证据所报告信息的公开、清楚、真实、中立和一致程度的主观感受.
另外,信息应以一种能使内部审核者和外部使用者检验其可信度的方式记录、编辑和分析.
透明性原则特别要求:清楚、明确地陈述和记录所有前提假定;清楚地引用背景资料;陈述所有计算、方法和使用的全部信息;清楚地指出记录方式的所有改变;以一种允许独立审定的方式,编辑和记录信息;记录解释和/或理由说明(例如,程序、方法、参数、信息来源、关键因素、抽样标准的选择等);记录所选标准的理由说明;记录前提假定、参考内容和方法,使他人得以复制所报告的信息;记录任何可能影响目标用户决定的项目外部因素.
8.
对效绩措施报告进行评估的另一标准是:红绿灯系统标识(TLS)的准确性.
TLS具有单独的功能,从严格意义上来说,并不是效绩数据的组成部分.
TLS准确性评估的基础,是能否根据效绩数据中的信息,说明评级的合理性.
效绩数据见2010/2011两年期计划效绩报告(PPR).

[后接二]随机抽样会议WIPO高级管理团队(SMT)成员或其代理在内部审计与监督司(IAOD)工作人员的监督下,随机抽取了每个计划的一个绩效指标(PI).

日期计划参与者职务计划名称20.
03.
12克拉克先生文化与创意产业部门助理总干事计划3:版权及相关权21.
03.
12奥尼亚马先生发展部门副总干事计划8:发展议程协调计划9:非洲、阿拉伯、亚洲和太平洋、拉丁美洲和加勒比国家及最不发达国家计划10:与欧洲和亚洲部分国家合作21.
03.
12高木善幸先生全球基础设施部门助理总干事计划12:国际分类及WIPO知识产权标准计划14:全球知识产权信息服务计划15:知识产权办公现代化22.
03.
12维夏德先生全球问题部门副总干事计划4:传统知识、传统文化表现形式和遗传资源计划7:仲裁、调解和域名计划10:与欧洲和亚洲部分国家合作计划17:树立尊重知识产权的风尚计划18:知识产权和全球挑战计划19:交流计划20:驻外办事处和对外联系22.
03.
12Kadri女士内部审计与监督司秘书计划26::内部审计与监督23.
03.
12Ignasse先生全球基础设施部门高级行政官计划2:商标、工业品外观设计和地理标志计划6:马德里、海牙和里斯本体系26.
03.
12Bachner女士计划管理与效绩科科长计划22:财务、预算和计划管理28.
03.
12Dayer女士人员资源管理部代部长计划23:人力资源管理与开发28.
03.
12Rainey先生创新司干事计划5:PCT体系计划30:中小企业29.
03.
12Fink先生经济与统计司首席经济学家计划16:经济研究、统计与分析29.
03.
12Prasad先生总干事办公室执行主任兼幕僚长计划21:行政管理30.
03.
12Rai先生会议和语言部干事计划27:会议及语言服务30.
03.
12雷先生首席信息官计划25:信息与通信技术02.
04.
12Baechtold先生专利法司干事计划1:专利02.
04.
12Donovan先生安全与保安协调处代理处长计划28:保安02.
04.
12Boutillon女士房舍基础设施司干事计划29:新建筑18.
04.
12Gamble女士助理总干事办公室行政助理计划24:行政支助服务[后接三]审定活动会议清单内部审计与监督司(IAOD)工作人员按标准访谈协议进行了访谈.
日期计划参与者职务计划名称05.
04.
12Lung女士专利法司高级顾问计划3:专利权及相关权利13.
04.
12Hopperger先生Friedli先生法律与立法建议司干事商标法处处长计划2:商标、工业品外观设计和地理标志16.
04.
12Bisson先生海牙注册部部长计划6:马德里、海牙和里斯本体系17.
04.
12雷先生首席信息官计划25:信息与通信技术17.
04.
12Ghandour先生发展议程协调司高级项目主管计划8:发展议程协调17.
04.
12DiPietro先生Kongolo先生WIPO学院干事职业发展培训处代理副干事兼处长计划11:WIPO学院18.
04.
12Donovan先生安全与保安协调处代理处长计划28:保安18.
04.
12Farassopoulos先生国际分类及WIPO标准处处长计划12:国际分类及WIPO知识产权标准19.
04.
12Roache-Turner先生Rios先生Rattray先生域名争议解决处处长兼法律主管域名争议解决处法律主管信息及对外联系处处长计划7:仲裁、调解和域名20.
04.
12Adam女士Thom先生行政助理总干事办公室高级顾问计划21:行政管理23.
04.
12McLeod女士WIPO图书馆馆长计划19:交流25.
04.
12Guiramand先生效绩管理、培训与发展处处长计划23:人力资源管理与开发25.
04.
12Saadallah先生Bradley先生对外关系司执行主任政府间组织及合伙关系处处长计划20:驻外办事处和对外联系26.
04.
12RocaCampaa先生助理总干事办公室高级干事顾问计划14:全球知识产权信息服务27.
04.
12Rai先生Chadarevian女士会议及语言部干事语言司司长计划27:会议及语言服务27.
04.
12CookRobbins女士Bona女士财务司司长,预算处处长计划22:财务、预算和计划管理27.
04.
12Krattiger先生Bartels先生全球挑战司干事全球挑战司高级项目官员计划18:知识产权和全球挑战27.
04.
12VanGreunen女士Min女士树立尊重知识产权风尚司司长发展处处长计划17:树立尊重知识产权的风尚30.
04.
12Fink先生经济与统计司首席经济学家计划16:经济研究、统计与分析30.
04.
12Rainey先生创新司司长计划30:中小企业01.
05.
12Boutillon先生房舍基础设施司司长计划24:行政支助服务计划29:新建筑01.
05.
12Svantner先生Gribkov先生欧洲和亚洲部分国家司司长及项目主管计划10:与欧洲和亚洲部分国家合作01.
05.
12Ntchatcho先生Wege女士Nyerere女士Ngoubeyou先生非洲地区局高级干事,副干事,高级项目主管计划9:非洲,阿拉伯,亚洲和太平洋,拉丁美洲和加勒比国家及最不发达国家02.
05.
12Wendland先生传统知识司司长计划4:传统知识、传统文化表现形式和遗传资源02.
05.
12Baechtold先生专利法司司长计划1:专利03.
05.
12Meredith先生Neyroud女士基础设施和现代化司司长,高级行政助理计划15:知识产权办公现代化04.
05.
12Matthes先生PCT业务和发展司司长计划5:PCT体系04.
05.
12Efendioglu先生内部审计处处长计划26::内部审计与监督[后接四]包含评级的审定评估充分达到标准部分达到标准未达到标准计划1-效绩指标:对专利制度的法律原则的讨论和利用增加效绩数据标准评论/数据局限性相关/有价值为评估提供的效绩数据和良好的评估部分相关,具有部分价值,因为这些数据缺乏关于专利制度法律原则的利用的信息.

充分/全面关于2010/11年开展的活动的效绩数据广泛、充分、详细.
有效收集/易于获取效绩数据和成员国报告相关,部分数据可在网上找到;大部分数据在计划1中维护,用于向部门管理者与总干事作内部报告.

一致性/可比较2010年和2011年为预期成果收集、分析并报告的效绩数据在2012/13年得到修改,以产生更加有效的预期成果,并使SMART关键效绩指标(KPIs)更有效地衡量预期成果.
关键效绩指标于2010年制定.

准确/可验证提供的效绩信息可以通过WIPO局域网上的记录并通过基于该计划保存的事实性证据的报告进行验证.
但现状是关键效绩指标不易明确衡量.

及时报告关于外部和内部定期报告,已向总干事、负责计划1的副总干事和成员国报告效绩数据.

清楚/透明以清楚透明的方式披露了效绩数据,可以对效绩指标的要求进行部分审核和分析.

红绿灯系统标识的准确性由于对计划1开展的活动缺乏影响分析,无法评估预期成果是否是通过特定的效绩指标实现的,效绩数据仅部分达到评估效绩的标准.

计划2-效绩指标:限制《新加坡条约》实施的问题以及实施该条约的收益得以确定效绩数据标准评论/数据局限性相关/有价值效绩指标关注产出,并非以SMART方式定义.
此外,效绩数据没有充分满足效绩指标和预期成果的信息需求.
尽管提供的文件对监测是有价值的,但和报告选定的效绩指标仅部分相关.
仅在很小程度上确认了限制《新加坡条约》实施的问题以及实施条约产生的收益.

充分/全面为监测目的提供的文件不充分也不全面,不足以比照效绩指标和预期成果作出报告.
需要进一步细化用于报告效绩指标的数据,以充分满足效绩指标的具体要求.

效绩数据标准评论/数据局限性有效收集/易于获取考察、研讨会报告以及提供给《商标法新加坡条约》(STLT)大会的报告作为监测数据的一部分,易于获取.
在提供的17份报告中,只有三份提到了少数限制和收益,其它报告根本没有提及任何效益和限制.
报告中提到的少数限制和收益也没有系统地列出,即没有高效地收集信息,在这方面提供的少数关键信息也不易发现.

一致性/可比较2010/2011年计划和预算文件中包含了效绩指标和预期成果,但是2012/2013年却终止了这个做法,因此不能进行比较.

提供的文件中都没有正式记录不再包括效绩指标的原因.
准确/可验证由于提供的文件与比照效绩指标和预期成果进行报告并不充分相关,因此可以认定在现有文件的基础上进行验证是不可行的.

及时报告用于比照效绩指标进行报告的监测报告是专为计划效绩报告收集的,每年都及时提供.
并不要求对该信息进行定期报告,但考察报告被认为对管理最为有用.

清楚/透明尽管以报告形式提供了监测数据,但该数据未满足效绩指标的信息要求.
没有提供收益和限制的清单,该信息需要在17份报告中查找,但仅有三份报告略微谈到少数收益和限制.
总体而言,提供的信息不够清楚透明,不足以比照效绩指标进行报告.

红绿灯系统标识的准确性考虑到"限制《新加坡条约》实施的问题以及实施该条约的收益"仅在很小程度上得到确认,大部分报告与比照效绩数据进行报告不相关,因此可以认定仅部分实现了目标.

计划3-效绩指标:版权及相关权常设委员会(SCCR)做出的决定和提出的要求效绩数据标准评论/数据局限性相关/有价值效绩数据对于比照经核准的效绩指标进行报告是相关的,但并不一定有价值,因为效绩指标对比照预期成果作出报告并不一定足够有意义和足够具体,其制定和目的并不一定清楚.

充分/全面由于没有清楚地制定经核准的效绩指标,且基准是计算决定的数量,因此可以认定提供的效绩数据是充分的.
但是,仅计算决定的数量而不报告决定的质量,并不能说明该计划正在实现其预期成果.

有效收集/易于获取用于比照效绩指标进行报告的信息可以在互联网和版权及相关权常设委员会(SCCR)的报告中找到.

一致性/可比较不能比较几年的效绩数据.
效绩指标在2010/2011年计划和预算文件中得到核准,但在2012/13两年期终止使用.

准确/可验证提供的效绩数据是准确且可验证的.
由于信息易于获取,所以经过了交叉核对.

及时报告信息提供是及时的.
清楚/透明用于报告的数据是透明的,可以在版权及相关权常设委员会的正式报告中找到,但未能清楚表明哪些决定或要求被用于比照绩效指标衡量效绩.

红绿灯系统标识的准确性由于缺乏清楚的目标,并考虑到效绩指标的弱点,因此只能认为红绿灯系统标识是准确的.
但是,效绩数据在没有SMART效绩指标的情况下也部分满足要求.

计划4-效绩指标:明确认可WIPO独特知识产权专业知识和贡献的其他国际论坛和机构进程的数量.
目标:四效绩数据标准评论/数据局限性相关/有价值提供的效绩数据和效绩指标相关,但对比照预期成果进行报告不一定有价值,因为效绩指标不够具体,可供解释的空间太大,尤其是涉及到进程数量的计算时.
2012/2013年该效绩指标已终止使用.

充分/全面考虑到效绩指标的局限性,提供的数据是充分、全面的.
有效收集/易于获取该计划对其大部分加强后续工作的活动保留了一份良好的记录清单.
该计划向审定小组提供了所需文件(如考察报告),但由于缺乏监测系统以实现数据的高效收集,这些报告不易获取.

一致性/可比较该效绩指标在2010/2011年计划和预算文件中引入,在2012/2013年计划和预算文件中终止使用.
因此,效绩数据在不同的两年期间无法比较.

准确/可验证由于数据不易编制,本次审定只验证了日内瓦以外考察情况的准确性,因为这些考察报告被要求提供,其信息是准确、可验证的.
总体而言,允许WIPO工作人员访问旅行授权程序中收集的所有考察报告的数据库可能有助于数据编制.

及时报告由于效绩数据仅被要求作为计划效绩报告的一部分提供,因此可以认为及时提供了报告.

清楚/透明由于效绩指标定义不清,因此效绩数据设置就不清楚.
尽管如此,该计划已尽最大努力提供记录和报告.

红绿灯系统标识的准确性考虑到效绩指标并不一定遵循SMART原则,且并不清楚效绩指标针对哪个具体进程,因此可以认为已经实现了目标.
建议在未来2014/2015年计划和预算文件中确保效绩指标遵循SMART原则,能够用于按预期成果衡量业绩情况.

计划5-效绩指标:成员国对提案质量的反馈效绩数据标准评论/数据局限性相关/有价值效绩数据与比照效绩指标和预期成果进行报告部分相关,但不一定有价值.
目前的效绩指标不是SMART指标,没有充分反映本司的工作.
为使效绩数据与决策相关且有价值,必须确定一个直接的SMART指标,清楚地反映该计划正在开展的工作.

充分/全面考虑到该计划在衡量该效绩指标上现有的局限性,且缺少关于反馈的记录,因此可以认为效绩数据是不充分、不全面的.

有效收集/易于获取该条标准不适用,因为没有为报告目的收集数据.
一致性/可比较效绩数据多年来是一致的.
但是除了满意度的一般表述,其它没有什么可比较的内容.
效绩指标的措辞在2012/13两年期的计划和预算文件中有所修改.

准确/可验证由于没有记录,审定无法核对信息的准确性,不可能进行验证.
及时报告由于仅仅为计划效绩报告的目的提供效绩数据,因此可以认为报告是及时的.

清楚/透明由于缺乏记录,因此可以认定效绩数据既不清楚也不透明.
红绿灯系统标识的准确性由于缺乏SMART目标和有意义的效绩指标,因此可以认定成果未能实现.
但是,为避免今后发生类似情况,本组织应在以下方面向该计划提供支持:(a)确认一个SMART效绩指标和目标,使之与该计划的日常工作及预期成果直接相关;(b)帮助该计划设计/确定对收集数据而言必要的监测工具.

计划6-效绩指标:日内瓦文本新增八个缔约方效绩数据标准评论/数据局限性相关/有价值效绩数据与比照效绩指标和预期成果进行报告相关,但是效绩数据对决策不一定有价值.

充分/全面效绩数据对比照效绩指标和预期成果进行报告而言是充分,但数据质量比数量更重要.
成员国数量增加并不一定意味着对体系的利用增加.

有效收集/易于获取已高效收集了报告效绩指标所需的数据,这些数据易于获取,可以在以下链接找到http://www.
wipo.
int/hague/en/notices/index.
jspitems=20一致性/可比较效绩数据几年内保持一致,尽管措辞略有不同.
准确/可验证效绩数据准确、可验证.
及时报告由于除计划效绩报告外本组织没有要求比照该效绩指标作定期报告,因此可以确认报告是及时的.

清楚/透明该计划在比照效绩指标进行报告时使用"海牙信息通告"(见上文链接)作为信息的主要来源.

红绿灯系统标识的准确性经核准的八个新缔约方的目标仅部分实现,目前只有七个新缔约方.
因此,计划效绩报告中的红绿灯系统标识是不准确的.

计划7-效绩指标:管理300件基于统一域名争议解决政策(UDRP)的国家代码顶级域案件效绩数据标准评论/数据局限性相关/有价值为该效绩指标收集的数据和实现有效报告相关,且具有价值.
充分/全面效绩数据允许充分全面地按效绩指标进行报告.
有效收集/易于获取所有案件及相关信息都保存在一个易于获取的数据库中.
数据可以方便地通过数据库系统进行收集,整个域名争议解决处都能使用数据库.
请注意案件信息是保密的,即外部公众无法访问该数据库.
尽管如此,案件的非保密信息(例如原告和被告姓名、起诉日期等信息在案件和解后可以在WIPO网站和局域网上获得).
见以下链接:http://www.
wipo.
int/amc/en/domains/cctld/index.
html一致性/可比较使用的效绩指标具有连贯性.
该处投入了大量时间设计其效绩指标.
实际上,他们在对往年活动水平、经验教训和外部环境进行仔细分析后设立了现实的基准.

效绩数据与预期成果、基数和效绩指标联系紧密.
鉴于效绩指标的性质,很容易就管理的案件数量进行比较.
准确/可验证基于域名争议解决处提供的文件,很容易对有关该效绩指标的信息进行验证.
其有效的数据库系统允许轻易地从数据追踪至其目标.

及时报告卓越的报告系统,定期报告信息.
此外,在需要时能及时提供效绩数据.
清楚/透明提供的记录清楚透明.
只有一小点建议:效绩指标包含了三个缩写,因此可能难以明确该指标是什么意思.
因此建议在效绩指标中避免使用缩写.

红绿灯系统标识的准确性基于提供的文件,可以认定红绿灯系统标识是准确的.
计划8-效绩指标:来自监测与评估的各项建议得到成功落实效绩数据标准评论/数据局限性相关/有价值为该效绩指标收集的数据与比照效绩指标进行有效报告不相关.
计划效绩报告中的效绩数据是关于发展议程(DA)建议的落实的.
总体而言,该计划似乎误读了报告要求和信息需求,因为该计划报告的指标是"所有项目均使用监测系统被并将其用于决策".
"已启动对六个已完成项目的外部评价"——这类信息本应作为审定效绩指标的一部分进行报告.

充分/全面关于落实发展议程建议的报告是充分全面的,但和该效绩指标的报告不相关.

有效收集/易于获取比照效绩数据进行报告的记录收集十分高效,也易于获取,但并没有满足效绩指标的需求.

一致性/可比较效绩指标没有包含在2008年的计划效绩报告中,在2012/2013年计划和预算文件中被移除.
由于不具备一致性,因此不能在较长时期内衡量效绩.

准确/可验证效绩数据准确、可验证,但和效绩指标不相关.
所有报告可以在以下链接中找到:http://www.
wipo.
int/edocs/mdocs/mdocs/en/cdip_5/cdip_5_2.
pdfhttp://www.
wipo.
int/edocs/mdocs/mdocs/en/cdip_6/cdip_6_2.
pdfhttp://www.
wipo.
int/edocs/mdocs/mdocs/en/cdip_6/cdip_6_3.
pdfhttp://www.
wipo.
int/edocs/mdocs/mdocs/en/cdip_7/cdip_7_2.
pdfhttp://www.
wipo.
int/edocs/mdocs/mdocs/en/cdip_8/cdip_8_2.
pdf及时报告需要时能及时提供效绩数据.
清楚/透明效绩数据清楚、透明,但在该层面不相关.
该计划解释说效绩指标直接衡量发展议程建议的落实;但阅读效绩指标时这一点并不明显.

红绿灯系统标识的准确性考虑到效绩数据不符合效绩指标的要求,可以认定关于该关键效绩指标的红绿灯系统标识评估不准确.

计划9-效绩指标:拥有现代化知识产权管理并向用户提供知识产权增值服务的国家的数量效绩数据标准评论/数据局限性相关/有价值效绩数据与比照效绩指标和预期成果进行报告部分相关,有部分价值.
报告涉及向用户提供增值服务,用于证实这一点的数据应由相关的知识产权局提供,局里只收到了部分数据.

充分/全面提供的记录对比照效绩指标和预期成果进行报告而言不够充分和全面;效绩指标的第二部分是定性分析,由于WIPO内部缺乏可用的效绩数据使报告受到制约.

有效收集/易于获取总体而言,编制计划效绩报告的数据并使其便于获取需要五个工作日.
因此效绩数据不能从单一来源/数据库获得,且不易获取.

一致性/可比较该效绩数据在2012/2013计划和预算文件中终止使用.
准确/可验证基于提供的记录,可以证实计划效绩报告中关于拥有现代化知识产权管理的国家数量的报告是准确的.
从提供的记录看,不能证实是否对用户增值服务展开分析.
因此,准确和可验证这一标准仅部分达到标准.

及时报告计划效绩报告的报告是及时的.
清楚/透明作为计划效绩报告的一部分报告的效绩数据和用于比照效绩指标进行报告的记录一样是清楚透明的.
但是,由于缺乏比照效绩指标进行全面报告的效绩数据,比照效绩指标进行的报告仅部分完成.

红绿灯系统标识的准确性综上所述,可以认定效绩指标和预期成果未能像2010/2011年计划效绩报告中计划9所述充分实现.

计划10-效绩指标:约15个新的国家制定先进的国家知识产权能力建设计划和知识产权战略并使之与国家发展计划相契合效绩数据标准评论/数据局限性相关/有价值效绩数据对按照选定的效绩指标进行衡量不一定有价值,也不一定相关,因为国家战略文件中没有提及WIPO的贡献.

充分/全面总体而言,效绩数据栏提供的信息是充分的,但不全面,因为给人感觉是WIPO制定了这些战略,而事实上是由成员国主导的.

有效收集/易于获取国家战略是为满足审定目的专门提供的,但这些战略在本组织内不易获取,因为工作人员需要一定的时间提供这些战略.

一致性/可比较效绩数据具有一致性,能够在几年时间内进行比较.
准确/可验证效绩数据不准确、不可验证,因为国家战略没有明确指出WIPO在战略制定方面的作用.

及时报告该计划定期使用该信息,但本组织并没有关于定期该提供效绩数据的其它要求.
因此可以认定报告是及时的.

清楚/透明尽管WIPO为各国提供帮助,在制定/修订国家战略时提供咨询服务,但这并不意味着WIPO制定了这些战略,WIPO只是对一个更大的进程做出贡献,各个国家才是这一进程的主人.

红绿灯系统标识的准确性由于该效绩指标并不直接说明WIPO支持的直接效果,因此可以认为实现了目标.
但是建议仔细分析这类效绩数据和效绩指标,因为可能对公众产生误导.

计划11-效绩指标:网络中关键合作伙伴的地理代表性增加效绩数据标准评论/数据局限性相关/有价值效绩数据与比照效绩指标进行报告部分相关.
效绩指标和效绩数据目前的局限性在于和预期成果实现相关的信息提供有限.
伙伴数量的定量信息只能部分表明该计划的伙伴数量增加,但不一定说明成员国知识产权培训和教育的国际合作效率得到提高.

充分/全面计划效绩报告中报告的效绩数据不够充分,因为该数据只提供了关于伙伴数量的信息,而没有关于地理代表性的信息.
但是,提供的记录充分全面,切实证明地理代表性也有所增加.
巴基斯坦、尼日利亚和印度尼西亚等国家已成为全球知识产权学院网络的新成员.
遗憾的是,该信息未作为计划效绩报告的一部分进行报告.

有效收集/易于获取记录以成员资格申请的形式被高效收集,并易于获取.
通过以下链接可以在互联网上找到成员名单:http://www.
wipo.
int/academy/en/ipacademies/index.
html一致性/可比较由于效绩指标每两年都有所变化和修改,因此效绩数据不一致,也不可比较.

准确/可验证根据提供的记录,计划效绩报告中报告的信息准确、易于验证.
及时报告计划管理者使用效绩数据进行监测.
仅计划效绩报告的需要该信息.
信息提供是及时的.

清楚/透明关于合作伙伴的信息仅被部分报告.
尽管该计划提供的文件清楚完整,但计划效绩报告没有提及地理代表性.
也不清楚是否确定了对伙伴进行分类的标准,因为指标提到的是关键伙伴.

红绿灯系统标识的准确性基于提供的记录,"关键合作伙伴地理代表性增加"的目标已实现,因此评级是准确的.
建议在今后的计划效绩报告中,该计划在对比效绩指标和预期成果进行报告时恰当利用自身的记录.

计划12-效绩指标:各项协定的缔约方数量增加效绩数据标准评论/数据局限性相关/有价值效绩数据与比照效绩指标和预期成果进行报告相关,但该信息仅部分有价值,因为目前设计的效绩指标不能提供有意义的比照报告预期成果和计划目标报告进展的信息.

充分/全面该计划确实使用从互联网上获得的数据比照效绩指标进行报告.
提供的信息符合效绩指标的数据要求.
该计划根据互联网上的数据提供了国家/缔约方的名称.
但是,效绩指标仅提供了定量数据而没有定性分析的空间.

有效收集/易于获取数据在互联网上可供公众使用,使报告和验证变得直截了当.
一致性/可比较效绩指标在2012/2013计划和预算文件中终止使用.
准确/可验证大部分效绩数据准确、可验证,除了计划效绩报告中报告的《尼斯协定》的一个新成员无法验证.

及时报告由于除计划效绩报告外本组织没有要求对该效绩指标作定期报告,因此可以认定报告是及时的.

清楚/透明效绩数据清楚透明.
红绿灯系统标识的准确性由于没有目标,可以认定红绿灯系统标识是准确的.
计划14-效绩指标:按主管局和国家开列的专利信息和专利态势分析网上教程学员和专利态势分析区域会议与会者在工作中使用新知识和新技能的百分比效绩数据标准评论/数据局限性相关/有价值效绩数据在相关时是有用的,因为效绩指标部分涉及使用网上教程工具,该工具仍在开发中,还不能使用.
预期成果的表述不便于衡量效绩.

充分/全面为该效绩指标提供的效绩数据不允许充分全面地得出结论,因为缺乏使用者对开发中的专利信息网上教程的反馈.

有效收集/易于获取收集、分析、监测、报告效绩信息以比照关键效绩指标(KPI)评价成绩的过程不是顺利的过程.

一致性/可比较该效绩指标于2009年末为2010/11两年期制定.
为该效绩指标收集和报告的效绩数据在本两年期内不一致,也不可比较.

准确/可验证提供的效绩数据包括考察报告、技术和创新支持中心(TISC)进展、需求评估问卷、关于区域会议的文件以及关于实现预期成果及具体关键效绩指标的相关协调努力的内部沟通.
但是没有提供关于网上教程的效绩数据,因为网上教程仍在开发中.

及时报告每年起码向发展与知识产权委员会(CDIP)报告一次效绩数据,在全年的季度活动报告中均提及对比该项关键效绩指标取得的进展.

清楚/透明提交至内部审计与监督司(IAOD)进行审议和分析的效绩数据清楚透明,所有相关文件均真实、中立、一致.

红绿灯系统标识的准确性基于收集的效绩数据,红绿灯系统标识是准确的.
总体而言,基于分析和对计划14负责人的采访,可以认定效绩数据部分达到标准.

计划15-效绩指标:2010/2011两年期42个知识产权局将实现增效.
这将通过提供自动化援助包和培训来实现.
效率的衡量将依据商定的效率标准进行效绩数据标准评论/数据局限性相关/有价值尽管效绩数据按国别对该计划的落实状态提供了很好的记录,对该计划和本组织整体都是有价值的,但与比照效绩指标进行报告的目的不充分相关.

充分/全面效绩数据不够充分、全面.
有效收集/易于获取该计划系统收集了用于比照效绩指标进行报告的信息,可以通过局域网方便获取.
该计划为本组织内的信息分享树立了一个良好的榜样.
遗憾的是,目前该计划可用的系统(例如WIKI)其设计不便于数据分析.

一致性/可比较由于该效绩指标刚于2010/2011年引入,在2012/2013两年期终止使用,因此可以认定效绩数据在两年期间不一致,也不可比较.

准确/可验证所有关于该计划活动状态的信息可以在局域网找到.
这有利于效绩数据的审定.
https://intranet.
wipo.
int/confluence/display/ipas/Hometicket=ST-9472-yfXrqugnvrg23Qs7ejqc-cas及时报告该计划确实定期使用按效绩指标进行报告所需的信息进行决策和管理.
总体而言,报告是及时的.

清楚/透明透明清楚地提供了用于按效绩指标进行报告所需的文件/信息.
但是使用情况分析和效率分析无关.
更何况使用增加不一定表示效率增加.
总体而言,建议该计划和其它所有计划在效绩指标设计阶段,就效绩指标的衡量和相关数据的收集达成一致.

红绿灯系统标识的准确性由于使用系统不一定意味着效率增加,且并没有进行真正的效率分析,因此可以认定目标仅部分实现,即该计划评级不够准确.
提高效率需要考虑很多因素,尤其是在WIPO对其与成员国协作的最终结果有贡献时.

计划16-效绩指标:与出版物总数相比,按机构和国家开列的为满足成员国需求而委托开展并已出版的研究报告的使用者数量效绩数据标准评论/数据局限性相关/有价值由于研究还在继续,效绩数据和按该效绩指标评估进展相关,但并不十分有价值.
还不可能对预期成果进行充分评估.

充分/全面由于研究推迟开始,不存在不同机构和国家研究使用者数量的信息.
提供的效绩数据包括项目简介、已开展研究的任务报告、2010/2011年工作计划以及可能影响预期成果实现的风险.

有效收集/易于获取信息作为向发展与知识产权委员会(CDIP)定期报告的一部分得到收集和分析.
去年向CDIP提交了第一份报告(CDIP5/7),今年将再提交一份.
因此信息作为CDIP报告的一部分在WIPO局域网上可以找到.

一致性/可比较具体的预期成果和关键效绩指标是为2010/2011两年期制定的,但关键效绩指标的落实有所延误.
因此研究将于2012/2013年完成,届时使用者可以使用这些研究所包含的信息.

准确/可验证将报告效绩数据,但由于研究仍在进行,还不能通过文件验证.
及时报告效绩信息在收集、分析后,每年至少向CDIP报告一次,因为这是成员国对开展这些研究的要求.
专门为审定工作提供了已有的效绩信息.

清楚/透明收集了已有的效绩数据,分析连贯,并以清楚透明的方式呈现,允许很好地比照预期成果和具体指标评估进展.

红绿灯系统标识的准确性关于实现该指标的进展,由于计划16缺少工作人员,且成员国间缺乏及时的磋商程序,巴西、智利和乌拉圭依据CDIP计划5/7开展三项研究推迟启动.
因此红绿灯系统标识不准确.
2010/11年启动的三项研究将于2012/13年完成,而不是最初计划的2010和2011年,届时使用者将能利用这些研究.
计划16提供的关于具体预期成果和关键效绩指标及效绩数据的分析部分达到标准.

计划17-效绩指标:关键的牵头伙伴组织和私营部门组织的具有共同目标的政府间和非政府组织参加的与知识产权执法问题相关的活动数量.

效绩数据标准评论/数据局限性相关/有价值用于比照效绩指标和预期成果进行报告的效绩数据相关,但对于衡量预期成果的进展不一定有价值.
计算活动数量不能为利益攸关方和管理者就该计划的效绩是否良好提供有价值的参考.

充分/全面对开展的活动保持了良好的记录,包括备忘录、考察报告和电子邮件通信.
提供给审定小组的记录和信息能够充分全面地符合效绩指标的要求.
但是效绩指标不一定是SMART指标,且只要求计算活动数量,所以限制了可以提供给计划效绩报告主要利益攸关方的信息量.

有效收集/易于获取信息以书面记录的形式编制,高效收集,易于获取.
但是如上文所述,效绩指标只要求计算活动数量,而不要求对数据进一步分析.

一致性/可比较由于效绩指标几年来不断变化,提高了效绩框架的质量,因此效绩数据和效绩指标不具备一致性和可比性.

准确/可验证基于提供的信息,本次审定可以确认效绩数据易于验证.
及时报告由于效绩数据主要用于向计划效绩报告作报告,因此可以认为报告是及时的.

清楚/透明效绩数据的报告清楚透明.
红绿灯系统标识的准确性由于没有确认目标,因此可以认为该计划充分实现了预期成果.
计划18-效绩指标:新政策工具和研究以及专利信息分析与数据工具的数量和范围目标:4项内部进行和4项委托外部进行的政策研究;6项专利态势报告;一个推动开放式创新和传播绿色技术的运行平台.

效绩数据标准评论/数据局限性相关/有价值效绩数据与比照效绩指标进行报告相关.
这是少数几个将可衡量的目标确定为计划框架一部分的计划之一.

充分/全面由于效绩指标只要求计算产出,因此可以认为效绩数据充分全面.
有效收集/易于获取用于按照效绩指标进行报告的所有信息都可以在网上找到,但外部人士可能不容易找到用于对比效绩指标进行报告的信息,因为信息不是有序地列在一个系统里,而需要在网上搜索.
尽管向审定小组提供了信息,但建议将所有信息记录保留在一处/一个数据库内,以方便参考.

一致性/可比较该计划于2010/2011年启动.
该效绩指标的负责人未能参与计划框架的制定.
因此提出在2012/2013年对效绩指标进行修改.
目前的效绩指标在2012/2013年终止使用.

准确/可验证本次审定交叉核对了该计划实现的各项产出.
总体而言,本次审定可以证明存在六项报告/政策研究,不论是内部完成还是与其他机构协作完成.
在审定过程中,该计划指出目标不是由负责实现目标者定义的.
此外,难以界定委托外部开展和内部进行的政策研究的界限.
总体而言,该计划本应委托进行八项政策研究,而实际只进行了六项.
计划效绩报告中报告的信息并非如此,该计划在计划效绩报告中提到了五项报告,尽管为审定目的提供了六项报告.

关于专利态势报告:由于现在由另一计划负责实现产出,该计划只能报告目标是否实现,并提供一个网站链接.
但是网站上的清单不完整,更多信息是通过电子邮件通信提供的.

已经为传播绿色技术和研发被忽视热带疾病建立了一个网络平台.
及时报告由于仅要求为计划效绩报告的报告提供效绩数据,因此可以认定报告是及时的.

清楚/透明用于比照效绩指标进行报告的信息清楚透明.
红绿灯系统标识的准确性由于不能实现所有产出,该计划选择了部分实现,对其效绩作出了正确评估.

计划19-效绩指标:图书馆访问者数量增加,对服务处信息资源的需求增长效绩数据标准评论/数据局限性相关/有价值收集的数据对监测和改善图书馆的服务是有用的.
但由于缺乏访问者反馈,无法衡量对图书馆资源需求的增长.

充分/全面为效绩指标收集的数据不能充分全面地衡量该效绩指标的效绩,因为没有一致、正式地捕捉和监测对服务处信息资源的需求.

有效收集/易于获取数据可以通过为外部和内部访问者建立的访客登记册方便获取和收集.
之前图书馆位于CAM大楼时,访问人数较少,因此记录在日志中.

一致性/可比较数据每月保存在文件夹中,可以比较.
制作了柱形图表明访问量随时间变化的趋势.
该效绩数据可在两年期间比较,且自2008/2009两年期以来保持不变.

准确/可验证效绩数据准确、可验证.
及时报告除了向计划效绩报告作报告外,没有其他的报告要求.
尽管收集、监测并跟踪了数据,但该数据没有在图书馆所属司的任何地方加以报告,也没有与个人/处的工作计划目标相联系.

清楚/透明信息收集是基于外部/内部访客的签名单,这些访客(特别是WIPO内部同事)有时不愿在清单上写下姓名和来访目的,这影响了信息透明度.

红绿灯系统标识的准确性基于上述收集的信息,该效绩指标部分实现,因为效绩指标第二部分涉及服务处信息资源的需求没有一致、正式地捕捉、监测和分析.

计划20-效绩指标:公共和私营部门的伙伴关系增加效绩数据标准评论/数据局限性相关/有价值对关键效绩指标的所有者意识表达了担忧.
尽管该计划参与了计划和预算的初期准备工作,但计划和预算文件定稿时出现了一些变化,该计划认为这些变化没有充分征求其意见.
尽管审定程序审核的关键效绩指标是相关的,但该计划认为缺乏一个充分的监测和报告机制来捕捉本组织内与这些伙伴关系相关的数据,因此降低了关键效绩指标的价值.
该计划的描述表明,这项工作的关键内容涉及到私营部门伙伴关系指南的制定和核准.
这本应在关键效绩指标中得到更好体现.

充分/全面为支持该计划比照关键效绩指标评估其效绩而提供的信息是三个私营部门伙伴关系的打印材料,这三个部门是世界知识产权组织研究联合体(WIPORe-Search)、WIPO绿色计划(WIPOGreen)和"获得研究成果、促进发展创新"(aRDI)组织.
计划20承认,可能有一些其他的伙伴关系在其不知情的情况下建立,因为对于其他WIPO计划所建立的伙伴关系,该计划依赖其他WIPO计划通知和联系它才能知道.

有效收集/易于获取效绩信息包是WIPO与私营部门合作开展的三个项目的打印材料,即aRDI、WIPO绿色计划和WIPORe-search.
关于合作伙伴的信息也可以在WIPO局域网找到.
一致性/可比较由于2008/2009年没有基准,效绩信息与前一个两年期不可比较.
准确/可验证提供的信息准确、可验证,但可能不够全面,还有重复计算的风险,因为在组织整体层面没有对这项关键效绩指标进行监测.
2012/2013年计划和预算提供了一个成果框架以纠正这一问题,成果框架显示了WIPO各项计划对本组织所有预期成果的整体贡献.

及时报告在讨论中提供了效绩信息,也可以在WIPO局域网中获得这些信息.
清楚/透明为三个伙伴关系提供的所有效绩信息都可以在WIPO局域网中找到.
红绿灯系统标识的准确性对效绩数据的审核、采访笔记以及对现有伙伴关系信息的分析表明,由于缺乏良好的基准和目标,又与正在制定的建立伙伴关系指南缺乏联系,因此效绩数据和关键效绩指标仅部分达到标准.

计划21-效绩指标:本组织具备有效的治理结构,预期成果明确,与战略目标相关联效绩数据标准评论/数据局限性相关/有价值效绩数据是相关的、有价值的,数据包括高层管理团队的结构和中期战略计划,以支持WIPO建立更好的治理结构.
此外,WIPO的战略目标已和2010/2011年计划和预算文件确定的个人工作计划目标相关联.

充分/全面提供的信息包括成员国关注的中期战略计划和高层管理团队的结构.
中期战略计划清楚地提到了注重成果的管理,因此在这方面提供的信息是充分的,因为在预期成果和战略目标(即中期战略计划)之间建立了中间连接环节.

有效收集/易于获取中期战略计划和高层管理团队的架构易于获取,相关文件都可以在WIPO局域网上找到.
此外,关于注重成果的管理的信息以及计划和预算报告也可以在局域网和互联网上找到.

一致性/可比较该效绩指标在2012/2013年终止使用,因此不能在不同的两年期间比较.
认为2010/2011年实现了成果.

准确/可验证基于为计划和预算提供的文件可以验证关于效绩指标的信息,也使得跟踪WIPO各计划的预期成果和战略目标的关联更容易.

及时报告为该效绩指标收集的信息作为全体大会文件的一部分提供给成员国,同时也出现在计划和预算的文件中.

清楚/透明信息的收集和提供清楚透明.
所有数据和文件都能在WIPO局域网上找到.
红绿灯系统标识的准确性基于对效绩数据的分析,再结合采访笔记,可以认定效绩指标充分达到标准.

计划22-效绩指标:财务工作和预算管理符合适用的WIPO公约和条约的规定、《WIPO财务条例与规则》和适用的适当会计准则效绩数据标准评论/数据局限性相关/有价值提供的效绩数据和用本指标对预期成果进行良好评估相关,且具有价值.
提供的文件包括一份由助理总干事办公室编写的办公指令(OIs)目录,内容涉及已经发布或即将发布的办公指令,这些指令有利于更好地监测财务和预算管理是否符合WIPO公约和条约、《WIPO财务条例与规则》及其它适用的会计准则.
财务和预算部门均已提交了关于指标已分解到个人工作计划的信息.

充分/全面效绩信息对开展评估而言足够充分全面.
应注意有一些办公指令仍待更新和/或发布,以确保预期成果更加符合该关键效绩指标.

有效收集/易于获取作为该效绩指标的一部分发布的办公指令可以在局域网找到,如关于接待的办公指令、公务差旅及相关费用、投资政策等.
关于本关键效绩指标与各工作计划的关联,关键效绩指标是计划和预算文件的一部分,预算和财务部门都不断更新各部门计划并通知工作人员.

一致性/可比较提供的效绩数据可以比较,因为2012/2013年保留了该关键效绩指标,以监测预期成果的实现进展.

准确/可验证效绩数据可以在WIPO局域网上部分找到,因为其与计划和预算文件中的办公指令及预期成果相关.
计划22提供的其他信息可以通过计划和预算准备过程中收集分析的财务及非财务信息验证.

及时报告及时提供了可用的效绩信息,使内部审计与监督司能够对文件进行评估.

清楚/透明效绩数据披露清楚,以透明的方式提供了办公指令目录和表明与效绩指标相关的部门工作计划.

红绿灯系统标识的准确性基于提供、收集、分析的效绩信息和采访,认为效绩指标部分实现了预期成果,因为一些办公指令仍待更新和/或发布(例如关于预算外资源的政策、岗位管理等).

计划23-效绩指标:收入中投资于工作人员发展的百分比效绩数据标准评论/数据局限性相关/有价值为计算百分比收集的效绩数据包括对总薪水的计算、工作人员培训清单和2010及2011年承诺投资金额.
通过这些数据可以计算出投资于培训活动的资金百分比,但其基础不是效绩指标中说明的收入,而是WIPO和其他联合国(UN)组织多年来一直使用的总薪水.
这一点在2012/2013年得到纠正,即使用总薪水计算投资于培训活动的金额百分比.
给出的解释为尽管知道计算的基础是总薪水而不是实际收入,但计算基础的改变超出了人力资源管理司培训处的控制.

充分/全面为评估提供的效绩数据被认为是充分全面的,能够计算出投资于培训活动的资金百分比.
自1998年就开始收集、分析、报告这一数据.
一个外部公司参与了对WIPO培训活动影响的调查.

有效收集/易于获取使用Excel电子数据表和微软Access记录由人力资源管理司培训处资助的个人和公司培训活动.
培训处的所有工作人员都能获得该数据,可以及时向人力资源管理司和/或高层管理团队提供该数据.

一致性/可比较尽管为衡量绩效收集的信息一直以总薪水和培训活动的承诺资金作为基础,但为2010/2011年制定的关键效绩指标却将收入作为基础,这让人感到混乱,也不为人力资源管理司培训处所使用,因此收集、分析、报告的信息与2010/2011年关键效绩指标的措辞不符.
如上文所述,这一点在2012/2013计划和预算文件中得到纠正.
培训处一直用总薪水中投资于工作人员发展的百分比作为百分比计算的基础.

准确/可验证信息可以通过计划和预算文件中提供的关于总薪水的数字进行验证,培训清单每年保存在一个微软Access数据库中.
计划和预算数字的准确性由外部审计员定期审计和验证,培训数字的准确性通过内部和外部审计员得以审计和验证.

及时报告定期对效绩数据进行报告.
于2012年4月27日向总干事递交了要求增加培训预算的备忘录.
在由位于都灵的联合国系统工作人员学院组织的关于培训问题的年度联合国系统组织会议上也讨论了这些信息.

清楚/透明提供的信息以相当清楚透明的方式呈现,2010年员工发展预算的变化化对培训活动有所影响,尽管可以更好地解释这一变化.

红绿灯系统标识的准确性效绩指标未能达到1%的目标,因此仅部分达到标准,但是效绩有所改善.
2010年和2011年总薪水中投资于工作人员发展活动的比例分别达到0.
44%和0.
46%.

计划24-效绩指标:不再租用其他房舍,而是在在现有的(包括所有和租赁房的)舍内配置办公空间效绩数据标准评论/数据局限性相关/有价值为本预期成果提供的效绩数据是相关的,并为评估是否通过该关键效绩指标实现预期成果提供了有用且有价值的参考.
首先,定义了用于办公室相关问题的词汇,如办公空间、占用率、空置率,以实现并加强房舍基础设施处内部对这些词汇的共同理解.
其次,计算占用率和办公空间可用性的工作始于2010年,花费了大量时间,于2011年12月完成.
这个过程主要依靠人工,相关信息的收集需要时间.

充分/全面为对照该关键效绩指标提供的信息足够充分全面,有必要的细节,可以对预期成果的实现水平进行良好评估.

有效收集/易于获取信息保留在房舍基础设施处内部,需要人工干预来开展效绩数据的收集、分析和报告,因此不易获取和提供.

一致性/可比较为2012/2013两年期制定了类似的效绩指标准确/可验证提供的信息可以通过提供给审定小组的文件证实,并与关于严格办公空间使用的办公指令相印证.

及时报告每年为计划效绩报告收集、分析并报告本信息,同时也作为本处正常日常活动的一部分监测可用的办公空间和办公室占用率.

清楚/透明效绩数据以清楚透明的方式呈现,可用以对预期成果的实现水平和关键效绩指标的准确性进行良好评估红绿灯系统标识的准确性经过审核与分析为评估本预期成果提供的效绩信息,认为本关键效绩指标充分实现了目标,效绩数据充分达到标准.

计划25-效绩指标:信息与通信技术(ICT)服务的费用(用于ICT计划的支出,包括工作人员和相关管理支出)在本组织运行费用(支出)中所占百分比效绩数据标准评论/数据局限性相关/有价值尽管对预算和成本控制是有用的,该效绩指标被认为与信息与通信技术司(ICTD)的工作计划目标不相关,因此不能帮助信息与通信技术司衡量其效绩、实现其目标.

充分/全面认为效绩数据对衡量效绩指标是充分的,但是不够全面,因为缺乏与工作相关计划目标的关联.

有效收集/易于获取效绩数据可以通过AIMS系统轻易收集,信息与通信技术司副司长可以直接访问AIMS系统.

一致性/可比较一直通过AIMS系统收集效绩数据,数据具有一致性和可比较性.
但如上文所述,这一有用的信息是用于预算和成本控制的目的,而不是作为信息与通信技术司的一个效绩指标.

准确/可验证数据可以通过AIMS系统对支出报告进行准确验证,支出显示了每个计划的非人员支出,有助于计算信息与通信技术运行支出占总支出的比例.

及时报告可以通过AIMS系统随时生成关于支出的报告,因此能实现及时报告.
但是该数据没有被用于内部或外部报告,而只是指示性地用于预算和成本控制目的.

清楚/透明可以通过由AIMS系统以透明清楚的方式生成的支出报告收集数据.
红绿灯系统标识的准确性由于缺乏相关性和可以评估及衡量效绩指标的基准,该效绩指标在2012/2013业已终止使用.
2010/2011年信息与通信技术司费用占总费用的百分比从2008/2009年的13.
6%下降至11.
5%.
但这并不意味着什么,因其与工作计划目标不相关,且缺乏基准.

计划26-效绩标准:两年期内完成至少10项审计效绩数据标准评论/数据局限性相关/有价值作为计划效绩报告的一部分报告的效绩数据与比照效绩指标进行报告相关,但对比照预期成果报告进展不一定有意义.
总体而言,提供的记录/文件很有价值.
但是该指标不充分,且主要关注产出,因此不能实现有意义的报告.

充分/全面提供的数据充分全面.
为审定目的提供了14项审计.
有效收集/易于获取所有报告都保存在WIPO驱动上,审计摘要可以在互联网和局域网上轻易获得.

一致性/可比较该指标几年来是一致且可比较的,但对于管理/报告目的而言没有价值,也不相关.

准确/可验证本次审定验证了报告的存在,可以证实效绩数据是准确的.
及时报告(除向计划效绩报告报告外)效绩数据用于向以下各方报告:(1)每季度向独立咨询监督委员会(IAOC)报告,(2)通过计划和预算委员会(PBC)及全体大会(GA)每年向成员国报告,(3)过去几年每季度向总干事报告.
所有报告都能在需要时及时提供.

清楚/透明考虑到产出指标的局限性,可以认为所有信息的呈现都是清楚透明的.
红绿灯系统标识的准确性总体而言,实现了目标,甚至超出了预期.
因此,本次审定证实了红绿灯系统标识的准确性.
但是,审定建议如果可能的话在2012/2013两年期对指标进行修订.
今后制定的指标应提供实现成果的证据,对决策而言应是有意义且有用的.

计划27-效绩指标:制定更有效和更全面的语言政策,确定与会议、出版物和WIPO网站有关的资源分配需求效绩数据标准评论/数据局限性相关/有价值为本关键效绩指标提供的效绩数据是相关且有用的,它明确表明制定了WIPO语言政策,同时考虑到工作负荷,相关资源问题也根据会议/大会及其它WIPO活动作出了清楚的估计.

充分/全面通过效绩数据,可以充分全面地认定该指标是否实现了其预期成果.
有效收集/易于获取效绩数据可以在WIPO局域网上找到,因其与全体大会为成员国提供的关于WIPO语言政策的文件相关.

一致性/可比较成员国于2010年要求制定一项WIPO语言政策,效绩数据与据此制定的关键效绩指标相关.
该信息具有可比性,2012/2013年关键效绩指标的措辞反映出当前WIPO的重点是在更广阔的范围落实语言政策这一变化.

准确/可验证面向成员国的报告中提供的信息包括WIPO全体大会会议、成员国大会、工作组和其他定期举行的常设委员会会议及其基于历史数据的费用,该数据可以通过AIMS系统验证.
上述会议是可验证的,在面向成员国的报告中准确提及.

及时报告每年向成员国及时报告效绩数据,数据可直接用于报告.
清楚/透明提供的效绩数据清楚透明,包括向成员国提供的报告.
红绿灯系统标识的准确性基于提供的信息,以及对计划27负责人的采访,可以认定效绩数据、预期成果和关键效绩指标充分达到标准.

计划28-效绩指标:对总部和协调办公室的房舍、会议和各种职能开展的风险评估和审计总数达到联合国安全管理系统标准的百分比效绩数据标准评论/数据局限性相关/有价值为审定提供的效绩信息包括审计/评估样本和活动风险评估.
这些文件的内容具有一致性,据信是基于经验编写的.
但是信息没有清楚表明审计/风险评估或活动报告是否达到联合国安全管理标准.

充分/全面为衡量本关键效绩指标提供的效绩信息包括安全审计以及活动和风险评估.
信息量足够评估文件的一致性.
关于衡量按照联合国总部最低工作安全标准(UNHMOSS)开展的活动/审计/评估的百分比,没有文件能用以评估效绩指标这方面的实现情况.

有效收集/易于获取所有活动/审计/评估都保存在一个专门的文件夹中,安全与保安协调处(SSCS)副处长可以访问该文件夹,他承认如果有一个数据库,列出所有活动/审计和评估,在必要和需要时方便信息检索就更好了.
安全与保安协调处面临着不了解由WIPO各计划组织的所有活动完整情况的问题,因为各计划并不通知安全与保安协调处.
要求所有工作人员和其他团组预先核准的E-work电子形式管理系统是良好的预防性控制手段,能帮助安全与保安协调处了解所有活动的完整情况.

一致性/可比较起草、收集和报告的同类信息(活动、审计和评估报告)在本两年期内具有一致性,可以比较.

准确/可验证由WIPO安全与保安协调处设计的安全审计模板不遵循联合国模板,一致认为有必要对WIPO模板进行审查,确保WIPO模板中的内容覆盖联合国模板中的所有基本问题.
另一方面,安全与保安协调处采用的模板是基于联合国总部安全活动/审计清单,加强了所包含信息的可验证性和准确性.
此外,所有活动审计和其他报告都保存在代理处长的个人驱动上,不存在一个活动数据库来连贯、及时、有效地跟踪所有报告.
这样做也将帮助安全与保安协调处监测并规划作为今后工作计划活动一部分的后续活动.

及时报告关于该效绩指标的信息不是定期报告,而是临时特别报告.
安全与保安协调处已开始编写季度活动报告,关于该效绩指标的信息将为其增加价值,但目前还没有提供价值.

清楚/透明不能通过效绩信息数据了解审计/风险评估的百分比是如何计算的,这降低了效绩数据的透明度.
为使数据更加清楚,应改善监测以确保用于报告的WIPO模板符合联合国总部最低工作安全标准.

红绿灯系统标识的准确性对效绩数据的审核以及采访笔记表明效绩数据不能充分清楚地解释在活动、会议、使团的审计和安全评估方面,如何计算总体上符合联合国总部最低工作安全标准的百分比.
没有提供联合国总部最低工作安全标准模板,因此不能判断WIPO模板是否与之相符.
现任负责人表示,WIPO文件是基于经验制定的,可能符合联合国总部最低工作安全标准,但由于缺乏支持性文件,不能证明用于报告的那部分模板符合该标准.

计划29-效绩指标:监测成员国批准的新建筑预算限额效绩数据标准评论/数据局限性相关/有价值提供的效绩数据和促进良好的评估相关,且是有价值的.
信息包括向计划和预算委员会、独立咨询监督委员会和全体大会会议提交的关于新建筑项目(NCP)的进展报告.
全面提供了关于新建筑项目的所有预算信息,帮助成员国和独立咨询监督委员会就建筑项目的预算问题发挥其监督作用.

充分/全面效绩数据能够充分全面地对预期成果的所有方面进行准确评估.
有效收集/易于获取每年定期在计划和预算委员会以及全体大会会议上向成员国报告所有效绩数据.

一致性/可比较自2008/2009两年期以来一直收集、分析效绩数据并向成员国和独立咨询监督委员会(前身为审计委员会)报告,数据具备一致性,易于比较.

准确/可验证计划效绩报告中提供的信息是准确的,可以通过向成员国和独立咨询监督委员会提供的定期报告(请见附加链接)以及年度内部和外部审计报告进行验证.

及时报告及时提供效绩数据以供审查,每年定期在计划和预算委员会及全体大会会议上向成员国报告.

清楚/透明以透明的方式呈现所有效绩数据,清楚地显示其与新建筑项目各方面的关联.
同时清楚表明了所有计算和假设,并详细提供了必要的解释.

红绿灯系统标识的准确性基于对提供的效绩数据的审核、开展的分析和给出的解释,认为本预期成果充分实现,因为定期监测新建筑项目的预算,发现几近完成的项目从未超过核准的预算限额.

计划30-效绩指标:在公共宣传和能力建设服务中使用WIPO资料或以WIPO产品为基础的资料的中小企业支持机构(包括大学)的数量效绩数据标准评论/数据局限性相关/有价值效绩数据相关,且具有价值,能够证明计划30开展的与中小企业(SMEs)支持机构/大学及其它利益攸关方相关的活动.
应加强效绩数据,从来自大学和中小企业支持机构的WIPO活动参与者那里获得关于这些活动的反馈,以有效衡量是否确实实现了预期成果,并在这些国家取得了预期结果.

充分/全面效绩数据不足以对为实现预期成果开展的活动进行良好评估,也不足以分析中小企业支持机构/大学对WIPO提供的服务或材料的满意度.

有效收集/易于获取效绩数据可以通过共享驱动获得,这有利于效绩数据的及时审核与分析一致性/可比较2010年制定了关键效绩指标,因此不能与上一个两年期进行比较.
但效绩数据可以在2012/2013两年期进行比较,因为使用同一个关键效绩指标来比照预期成果衡量效绩.

准确/可验证计划效绩文件2010/2011中添加的效绩数据,已通过审查计划30关键工作人员在访谈中向审定小组提供的文件证据加以验证.

及时报告每年收集、分析效绩数据并向计划效绩报告作报告,数据也用于本处内部监测计划目标的落实及决策.

清楚/透明效绩数据是真实的,可以通过任务报告、工作计划和其他证据验证.
在审查时能够得到的所有相关效绩数据均提供给了审定小组.

红绿灯系统标识的准确性基于提供的信息和采访中提供的解释,效绩数据部分支持评估,因为缺乏基于用户对WIPO有关中小企业的服务和材料的反馈所作的影响分析.

[后接五]审定框架预期成果效绩指标和目标基数效绩数据1.
提高对专利制度的法律原则和实践的认识,包括对专利制度中现有的灵活性的认识,提高意识并进一步明确当前以及正在出现的与专利主题相关的各种问题对专利制度的法律原则和实践的讨论和利用增加成员国决定在SCP讨论一系列与专利相关的议题(开放式清单)以及在发展与知识产权委员会(CDIP)讨论与专利相关的灵活性-通过提供中立和兼顾各方利益的立法和政策建议,23个成员国、1个地区集团和1个地区主管局得到援助,能够更好地确定满足自身需要的专利/实用新型/未披露信息/集成电路的立法框架-CDIP讨论了关于专利相关灵活性的两份文件;旨在促进交流专利相关灵活性的落实经验的地区性系列研讨会首次会议在亚洲地区召开-在几个国家的首都(22次短期出差)和日内瓦召开的会议上(12次对WIPO总部的研究访问)就一系列专利法律和政策问题展开磋商,帮助提高了对专利制度和专利法的理解.

-通过对询问或征求意见的政策文件作出12个书面答复,提供指导和意见(知识产权战略和/或计划)-成员国在SCP就专利相关议题展开讨论,通过在闭会期间提交意见以及向SCP会议提交提案的方式积极参与辩论-关于专利权的限制和例外的调查问卷收到来自超过70个成员国和地区专利局的答复-CDIP讨论了关于专利和公有领域的研究报告,批准落实关于专利和公有领域的项目2.
完成对实施《新加坡条约》提供援助的工作进展和实施此项条约所产生的利益的评估已查明限制实施《新加坡条约》的问题和因实施此项条约而产生的利益之前无评估关于"与《新加坡条约》实施工作相关的援助以及实施所产生的效益"的报告(《补充〈新加坡条约〉的决议》段落8)(STLT/A/3/1)提交新加坡条约大会第三届会议(第2次例会)审议,该会议已注意到此报告3.
为发展国际版权及相关权政策和法律框架以及全球版权基础设施作出贡献版权及相关权常设委员会(SCCR)作出的决议和提出的要求30个决定和要求(2008/09年)SCCR会议产生了20个决定和行动要求4.
进一步加强WIPO本领域的工作与其他有关传统知识、传统文化表现形式和遗传资源的国际进程之间的合作与协调明确承认WIPO独特的技术性知识产权专门知识与贡献的其他国际论坛和机构进程的数目.
目标:414个进程(2008/09年)WIPO受邀参加生物多样性公约(CBD)、世界贸易组织(WTO)、联合国粮食及农业组织(FAO)、人权事务高级专员办事处(OHCHR)、世界卫生组织(WHO)、联合国土著问题常设论坛、联合国土著人民权利专家机制、联合国教科文组织(UNESCO)和联合国土著问题机构间支助小组的会议和活动,并提供知识产权相关信息5.
就如何对PCT体系进行整体完善,使交付的成果满足申请人和各种被指定主管局的需求,帮助主管局确保国家阶段迅速确权的问题提出提案成员国对提案质量的反馈不可用参加2010年和2011年PCT工作组会议的各成员国代表团对秘书处为会议所做的准备工作表示感谢,包括对会议准备阶段召开的非正式情况介绍会,以及提交工作组审议的工作文件的质量表示赞赏(见会议报告、文件PCT/WG/3/14Rev和PCT/WG/4/17)6.
马德里体系的国际覆盖面扩大日内瓦文本增加八个缔约方日内瓦文本共计36个缔约方阿塞拜疆、芬兰、德国、摩纳哥、黑山、挪威、卢旺达和塔吉克斯坦7.
通用代码顶级域和国家代码顶级域的知识产权保护有效管理300件国家代码顶级域基于UDRP的案件中心受理并管理16,770通用顶级域和国家代码顶级域案件(2009年年底)2010/11两年期内,中心受理842件国家代码顶级域UDRP案件.
其中739件在两年期得以解决,剩余有望在2012年得到解决.

8.
对建议进行有效监测、评估和报告通过监测与评估工作圆满实施各项建议2009年4月已就19项建议提交了报告分别向CDIP第五届和第七届会议提交了两份《总干事关于发展议程落实情况的报告》向CDIP第六届和第八届会议提交了四份关于应予以立即落实的建议和关于正在落实的发展议程各项目的进展报告.
每份报告都得益于成员国在报告实质和措辞方面的指导.

9.
建立现代化服务型知识产权管理部门,加强基础设施(非洲)拥有现代化知识产权管理并向用户提供知识产权增值服务的国家的数目国家和区域知识产权管理部门拥有接触到用户的有限能力通过IPAS/WIPOscan加强了博茨瓦纳、埃塞俄比亚、肯尼亚、马达加斯加、莫桑比克、坦桑尼亚联合共和国、乌干达和赞比亚等8个国家的基础设施10.
使国家知识产权战略与立法符合国家发展战略和计划并符合国际知识产权条约与协定又有约15个国家建立符合本国发展计划的国家知识产权能力建设计划和知识产权战略国家和区域知识产权管理部门拥有接触到用户的有限能力(1)采纳或修改知识产权战略:阿尔巴尼亚、保加利亚、克罗地亚、匈牙利、罗马尼亚、吉尔吉斯斯坦和摩尔多瓦(共7个)(2)知识产权战略启动:亚美尼亚、白俄罗斯、波斯尼亚和黑塞哥维那、以色列、马耳他、塞尔维亚、前南斯拉夫的马其顿共和国、乌克兰和土耳其(共9个)11.
加强了成员国之间开展知识产权培训和教育领域国际合作的网络并提高其效率提高了关键合作伙伴在网络层面的地理代表性21个合作伙伴24个合作伙伴12.
国际分类与WIPO标准得到更广泛的接受和更有效的使用各项协定缔约方数量增加在WIPO网站上提供信息IPC:新增2个成员尼斯:新增一个成员维也纳:新增3个成员洛迦诺:新增1个成员13.
通过开发专利态势分析和关于选定主题的相关工具,专利信息的使用情况得到完善按主管局和国家计的专利信息和专利态势分析网上教程学员和专利态势分析区域会议与会者中在工作中使用新知识和新技能的百分比截止2009年底,无(2011年第一季度,在线指导即可投入使用)在线指导将于2012年中期完成;在这两年期间,共举行了4次区域会议,分别在非洲(亚的斯亚贝巴)、亚太(新加坡)、CEAC(莫斯科)和拉丁美洲(布宜诺斯艾利斯);详细信息请见"TISC进展与需求评估问卷"(2011年12月).

14.
知识产权机构的效率通过业务程序自动化得到加强2010-2011两年期42个知识产权局将实现增效.
这将通过提供自动化援助包和培训来实现.
效率的衡量将依据商定的效率标准.

两年期共访问了91个知识产权局,有时多于一次通过WIPO的自动化产品与服务的辅助,有58家不同区域的知识产权局的效率提升了15.
提高知识产权制度对发展影响的理论、经验主义和实际认识为满足成员国需求,已出版委托进行的研究报告的每一组织和国家的报告用户数目,组织和国家的选择系根据出版物的总数新活动三个关于IP和经济发展主题的国家研究已经开始实施.
如项目CDIP/5/7所预测的那样,这些研究只能在2012/13年间完成16.
国际合作并把知识产权问题纳入伙伴组织有关建立尊重知识产权的相关活动中与构建政府与非政府组织对IP的尊重的活动,这些活动均有共同的目标,均由重要的合作组织与私营部门举办截止2009年底,共20次活动该计划参与了34项由伙伴组织举办的涉及战略目标六的框架下构建对知识产权的尊重相关活动17.
为决策者提供加强专利信息使用的政策分析和为公开创新提供实用工具的独特、实用信息源新政策工具和研究以及专利信息分析与数据工具的数目与范围.
目标:4项内部进行和4项委托外部进行的政策研究;6项专利态势报告;一个推动公开创新和1个传播绿色技术的运行平台;两项被忽视热带病研发编制有关流感病毒、被忽视疾病、水稻基因组的专利态势报告和已完成的关于禽流感、依据多边环境协定(MEA)的技术转让、公共利益知识产权管理、生物伦理的政策研究新联合团体WIPORe:Search(致力于对抗被忽视的热带疾病)于2011年10月发布2011年10月26日WIPORe:Search启动后,发布了专门网站(www.
wiporesearch.
org)试验版本的wipogreen—可持续科技市场自2011年下半年上网.
出于WHO的请求(2010年12月),发表了一篇关于流行病预防(PIP)的WIPO专科研究报告--与专利及专利申请准备有关.
该报告已经在2011年4月的WHO成员国开放工作小组会议上进行发表,会议的主题是"流行病预防:流行病毒分析与疫苗的获取以及其他益处.

WHO、WIPO和WTO共同编写的两次WHO/WTO/WIPO研讨会的总结报告已经发表.
启动了两个刊物系列:首个全球挑战简报:《当政策遇上证据:知识产权、技术转移与环境的下一个议题是什么》首个全球挑战报告:《IP权利在转让环境无害技术中的角色》.
关于主题为"私人与公共部门是如何借助知识产权增加农业生产力的"的会议记录已发表.

计划14执行并完成了6项专利态势报告.
18.
加强使用WIPO图书馆的信息资源到图书馆参观者数量增加,对服务信息资源的需求增长2008/09,每周有11个图书馆访问者2010年每周12个访问者;自从2011年6月搬入新大楼后每周25个访问者19.
产业团体和民间社会加深对WIPO工作和知识产权发展利益的认识;根据接纳和认可非政府组织的标准,加强民间社会对WIPO活动的参与度(发展议程建议42)公共和私营部门的伙伴关系增加无指南.
无正式的公共和私人伙伴关系协议草案已拟定3个伙伴关系20.
各项基本条件——内部统一、组织监管和根据战略目标的调整到位,以提供有效的战略指导、向成员国提供支持和交付成果本组织具备有效的治理结构,预期成果明确,与战略目标相关联无高级管理层到位.
没有建立介于本组织的9个战略目标和在两年计划预算期内的预期成果间的中间层次-全面完善的高级管理团队到位-成员国所注意到的2010-2015中间阶段战略计划21.
为财务资源使用和员额管理落实连贯的规范性框架,确保正直诚实地进行所有财务工作财务工作和预算管理符合适用的WIPO公约和条约的规定、《WIPO财务条例与规则》和适用的适当会计标准各种政策、规则和程序的文件整理完毕,可供使用这是一项持续进行的工作.
但对办公指令进行了一次回顾,以确认那些需要更新的内容.
关于公务接待的办公指令也相应更新.
对于《WIPO财务条例与规则》的更新被递交给了WIPO成员国大会以反映变化(IAOD和IAOC).
在本两年期中通过并推广的政策包括:应用于发展与知识产权委员会(CDIP)的发展议程实施倡议所建议的项目的预算流程;储备金政策与储备金使用原则;投资政策;WIPO的资本规划和管理规范性框架.
本计划也致力于长期效力的临时雇员规划(正规化战略)22.
征聘和培训程序有自动化和适当资源支持,得到完善收入中投资于工作人员发展的百分比2009年收入中投资于工作人员发展的百分比为薪金总数的0.
37%提出增加预算拨款,将用于工作人员发展的收入百分比提高到1%,但未获批准.

达到的百分比:2010:0.
44%2011:0.
46%23.
房舍的使用和占用做到最佳(包括新建筑)现有(自有和租用)房舍内的办公场地分配不新增租用房舍可供办公空间的占用率为94%(2009年底),具体如下:-所有自有大楼(AB、GBI、GBII、PCT)和租用大楼(P&G、CAM)可供办公工位为1,400个;-1,320人配置了工位(包括员额工作人员、G类短期职员、临时译员和审校、顾问以及SLC、实习生、SSA以及外部公司的职员)6%的工位空置率接近于最低商业标准5-10%的最下限可供办公空间的占用率为92%(2010年底)和87%(2011年底)具体如下:-随着一些空间的转换,2010年可供办公工位有1,457个;随着新大楼开放以及更严格的办公空间分配政策的落实,2011年可供办公工位有1,579个-2010和2011年分别有1346人和1374人配置了工位(包括员额工作人员、G类短期职员、临时译员和校对员、顾问以及SLC、实习生、SSA以及外部公司的职员)办公工位空置率:2010年为8%,2011年为13%,即进一步改善以确保必要的中期灵活性.

24.
服务提供得到加强,高质量外部信息技术服务提供具有成本效益信通技术服务的费用(信通技术计划支出,包括工作人员和相关支出)在本组织管理费用(支出)中所占百分比计划25的总支出达4,520万瑞郎(2008/09年),占本组织在2008/09年度总支出的7.
83%计划25的总支出达4270万瑞郎,占本组织在2010/11年总支出的7.
25%25.
有效和专业的内部审计到位,覆盖所有高风险工作领域两年期完成至少10项审计2008年完成4项审计.
2009年发布了5个审计报告完成了14项审计并发布了报告(2010年6项,2011年8项)26.
为所有需求部门和用户提高会议、语文、印刷、记录管理/档案和邮件发送服务的有效性制定更有效和更全面的语言政策,确定与会议、出版物和WIPO网站有关的资源分配需求.

现行政策和资源不符合成员国表达的需要2010和2011年成员国大会审议了WIPO语言政策.
2011年决定自2012年起将六种语言的覆盖面扩展到WIPO所有的委员会和主要机构.
2010/11两年内,六种语言的覆盖面扩展到SCCR和SCT.

27.
质量保证:为WIPO在日内瓦和其他地方举办的高级别会议以及WIPO各协调局提供满意、得到完善的安全与保安为总部和协调处房舍、会议和各种职能进行的风险评估和审计总数中达到联合国安全管理制度系统的百分比为总部和协调处房舍、会议和各种职能进行的风险评估和审计总数中,约有80%达到了联合国安全管理系统的标准2010/11两年期内,对外部办事处房舍、由WIPO直接管理的两次外部活动进行了7次审计.
此外,对UNDSS在该国协助WIPO协调活动的安全与保安的外部会议进行了3次审计28.
建筑工程按时、在预算限度内监督成员国批准的新建筑预算限额不适用截至2011年底支出仍保持在预算限额内,并剩余总计450万瑞郎的未承付和未支出余额29.
加强中小企业支持机构的能力,包括大学和中小企业培训机构,以便向其成员企业提供知识产权信息、支持和咨询服务在宣传意识和能力建设服务中使用WIPO资料或以WIPO产品为基础的资料的中小企业支持机构(包括大学)的数目数据不可用本两年期内每年组织了WIPO-KIPO-KAIST-KIPA基于英文版IPPANORAMA多媒体工具包的高级在线证书课程.
在印度举行了两次国家会议,在布拉迪斯拉发举行了一次次区域会议,并举行了两次针对OECD国家共享MSME最佳知识产权实践的论坛.