澳大利亚的悉尼大学。

悉尼大学说,参与每个时代运动成本40000小时时间和员工来自200万美元的薪水。来源:Hongjie汉/盖蒂

研究评估澳大利亚研究理事会(ARC),一个国家的主要出资方将得到改造。上个月,一个独立的专家审查建议弧废除其13岁的research-scoring系统,称为卓越研究澳大利亚(时代),和它的同伴练习,成绩的参与和影响评估机构的实际效益的工作。自去年8月以来一直搁置,等待审查的结果。

这是一个罕见的案例的评价体系可以重写。弧应该借此机会改善措施和如何沟通澳大利亚研究劳动力的价值,不仅仅是教训的基础上,从时代的不足,而且还开发和实施原则在世界其他地方。在这一过程中,它将有助于创建一个研究文化,反映了研究应该代表的最佳值。

从2010年到2018年,有四个时代练习得分输出来自澳大利亚的42个大学和公共资金资助的研究机构。研究给出评级从“远低于世界标准”,5,远高于国际标准。对于大多数科学和工程学科,引证指标的主要措施;人文学科、社会科学计算和数学,依赖在同行评议。

上个月的专家审查的时代,由澳大利亚政府发起的,得出结论,评价意味着澳大利亚执行优惠的国际基准。但这也是有代价的。提交审查结果证实过程繁重的时代,由于时间编译所需的信息。这影响了个人和机构。例如悉尼大学,40000小时以上的员工时间是花在时代的过程,大学花费超过200万澳元(合130万美元)的工资,根据其提交。

这些努力是没有太多明显的回报。时代不同,结果说,英国卓越的研究框架,不习惯决定大学资助。相反,它们是用于这些目的,如设置研究战略,基准测试和评估的趋势。同时,犹如机构之间的相互鼓励他们挖走学者和复制技术,而不是培养一个合作,跨学科研究文化。

审查明智地拒绝表明时代被替换为一个纯粹的参数标准运动减少开销。使用引用和期刊影响因子等指标是有问题的,至少可以这么说。首先,他们不捕捉复制研究和荟萃分析,哪些期刊出版。此外,社会科学和人文学科的研究——更频繁发表于国家,而不是国际出版物——尤其弱势等措施。在著名期刊上,引用计数不公平的其他重要的工作,如建立数据库和软件,与公众参与。

十年前的这个月,旧金山宣言》的研究评估(多拉)被评估的原则不应该过多的依赖于期刊的影响因子作为衡量质量的研究。开发的声明,在2012年美国细胞生物学学会的年度会议上,敦促,除此之外,不应使用基于杂志指标作为替代措施的研究质量评估个体科学家的贡献,或者在招聘、晋升或资金的决定。超过20000人和2800机构目前在160个国家签署了多拉。

更多的发生在十年。2015年莱顿宣言建议评估预测评估系统可以博弈(d·希克斯自然等。520年,429 - 431;2015年)。2019年香港原则旨在建立信任科学包括透明度、开放科学和负责任的科研行为评价(d·莫赫等。公共科学图书馆杂志。18e3000737;2020年)。2021年,科研管理社会发达的国际网络框架范围怎样进行评估指导,嵌入这些理想的原则。

澳大利亚的不仅仅是重新考虑如何评估。例如瑞典研究理事会,避免了评价其整个研究工作的压力在一个无所不包的练习中通过评估特定学科的要求,而不是根据一组循环。荷兰也不那么繁重的过程,不仅捕获研究机构”之前的输出,但看起来前锋通过识别未来的计划和能力,找出优势和需要改进的地方。

时代的更替也应该没有降级的专长研究经理。许多研究人员,他们的角色远远超出管理时代。通过他们的工作,大学周围不断努力改善政策研究道德、公众参与和出版,寻求更加多样化和更友好的地方。这将是愚蠢失去专业知识。

分数很重要的公共资金资助的研究的质量。没有完善的制度,但弧和其他国家资助机构应该照顾采用工作的原则和实践。评价有权形状研究文化的好和坏。它需要做得很好。