前言

随着阅读推广活动在全国各地全面、深入的开展,评价其绩效日益必要和重要。对于阅读推广活动的评价,需要系统的定性和定量的描述,还需要对于某组织的跨越时间段的整体的阅读推广系列活动的评价,也需要对于覆盖某区域的阅读推广活动的综合评价。同时,真正基于用户(读者)需求和反映的,他所接收到的阅读推广活动对其心智影响的前后对比,也是阅读推广活动评价中不可或缺的部分。建立一个科学的、多层次的、综合的阅读推广活动评价指标体系和实证研究,是对阅读推广理论研究上的重要补充。同时将会弥补阅读推广实践的不足,加强阅读推广与公民阅读的联系,提升阅读推广活动的效果。

一、项目预期研究计划的执行情况。

项目获批2015年国家社科基金年度项目。项目拟从单个阅读推广活动的评价指标构建开始,进行实证研究,再层层推进,评价某单位某时间段的阅读推广活动整体效果,再上升到某区域的阅读推广活动的总体评价指标体系的构建和实证研究。项目拟于2018年6月结项。

在研究过程中,发现工作量较大,而且从提出评价指标到分析权重,到计算方法和模式,再到实证,也存在着不小的难度,因此直到2020年初,项目才得以完成。

2015年7月10日,项目启动会召开,讨论了项目的计划和初步分工。

2016年1月18日,项目组召开项目工作推进会。

2016年3月18日,项目组召开初步成果汇报会。通报了项目组论文发表情况并提出下一步的工作。

2016年7月15~16日,项目组参加由河南省高校图书情报工作委员会举办的“河南省高校图书馆阅读推广与服务创新学术研讨会”。

2017年9月15日,项目组成员召开第五次会议,负责人介绍了项目的科研进展与项目的关键——评价指标体系的构建及其进展。

2017年9~12月,主要进行项目评价指标的构思,设计“阅读推广活动评价指标问卷”,邀请专家指导,进行修改。后邀请38位相关专家、活动组织者、活动用户打分,计算各级指标的权重,并对于单个活动评价指标进行初步验证。

2018年,项目组组织相关成员,对于阅读推广活动及其管理特点、阅读推广活动绩效评价体系框架等方面进行深入研究。

2019年初,项目组研究活动评价指标的算法,提出两种模式,并分别进行实证,最终对于第二种计算模式进行详细研究,提出计算方法和过程。开始着手编写结项报告。

2019年8~12月,进行活动评价系统(网络版)的设计。

2019年12月到2020年的2月中旬,对于提出的阅读推广活动评价指标进行实证,完成项目的研究计划,编写结项报告。

作为本项目的主持人,自从2010年起,作为中国图书馆学会阅读推广委员会大学生阅读专业委员会委员,以及自2016年作为河南省高校图书情报工作委员会阅读推广委员会主任,积极参加国内阅读推广相关会议,了解国内阅读推广活动的现状,并组织相关阅读推广活动。得到国内阅读推广界相关专家的提携、指导与帮助。这些都为本项目的开展起到极大的帮助作用。

二、研究内容及方法及创新方面。

在研究内容及方法方面:

第一,阅读推广活动的三个层次的三级指标体系以及各指标的权重。阅读推广活动的三个层次:单个活动、单位年度整体活动、区域年度活动。提出了针对三个层次的活动评价指标体系,指标体系分为三级,6个一级评价指标:管理绩效、技术绩效、经济绩效、社会绩效、生态环境绩效、可持续发展绩效。其中单个活动评价指标有13个二级指标,27个三级指标;单位活动评价指标有19个二级指标,57个三级指标;区域活动评级指标有15个二级指标,38个三级指标。将阅读推广活动评价指标,设计成问卷形式,经过专家评选,利用熵权法,计算出活动评价指标的权重。三个层次活动各有各的三级评价指标权重。

第二,阅读推广活动评价分值的两种计算方法和计算过程。第一种是基于活动前后问卷(访谈)相结合的模式,需要活动的组织者和用户以及公众共同参与。第二种是基于活动后填写数据或回答问题的模式,仅需要活动的组织者填写即可。两种模式都有优缺点。针对第一种模式,提出需要设计活动前、后的问卷,以及活动评价共3个调查问卷;针对第二种模式,提出了基于三个层次活动的评价问卷。单个活动评价的主要问题有48个;单位活动评价的主要问题有111个,分为三类:单个活动问题34个,需要重复填写、年度活动的基础问题13个、年度活动的针对性问题64个,后两类问题填写一次即可;区域活动评价的主要问题有97个。

第三,设计阅读推广活动评价系统(网络版)并进行实证研究。该系统在界面上集成了三个层次活动的评价入口,实现用户注册和登录功能,填写内容结束后,即可得到活动评价的分值。对三所高校、一个县级公共图书馆、一个县级新华书店举办的14场不同类型的单个活动进行评价实证;对三所高校、一个县级公共图书馆、一个县级新华书店进行单位活动评价实证;对一个县、一个区进行区域年度活动评价实证。

在创新方面:

第一,面向阅读推广活动评价的需要,提出三个层次的阅读推广活动。第一层次是单个阅读推广活动,即独立的阅读推广活动;第二层次是单位年度或某一阶段的阅读推广活动,由许多单个的阅读推广活动组成,但单位年度或某一阶段的阅读推广活动在规划上,还要考虑各个活动的类型与补充,同时也包含单位层面上的阅读推广活动或协调与指导;第三层次是区域年度或某一阶段的阅读推广活动,由许多单位的年度或某一阶段阅读推广活动组成,但是需要区域阅读推广活动的主管部门协调和指导。

第二,构建阅读推广活动评价三级指标体系及其权重。针对三个层次的阅读推广活动,在现有研究成果的基础上,分析其活动特点和评价要求,提出三个层次的阅读推广活动评价指标体系,通过相关专家的指导意见,利用熵权法,计算出三个层次的阅读推广活动的三级评价指标的权重。

第三,提出阅读推广活动评价的两种模式。阅读推广活动评价的两种模式为:基于活动前和活动后问卷相结合的评价;基于活动后问卷的评价。对于第一种模式进行了单个活动评价的初步实证研究。对于第二种模式进行较为详细和全面的实证研究,针对每一个三级指标,提出相应的问题及其计算方法。在相关高校、县级图书馆、县级新华书店、县区级区域对单个、单位、区域活动的评价进行实证研究,验证了提出的活动评价指标与系统的基本功能和可用性,并提出下一步的建设任务。

三、资料收集和数据采集情况。

资料收集情况:进行国内外阅读推广活动评价的相关资料的收集与整理400多篇,重点参考中外文献100多篇以及网页资料30多篇,主要参考阅读推广活动评价、图书馆绩效考核标准、公共管理项目评价等内容的文献,基本满足研究的需要。

数据采集情况:

收集、汇总38位专家对于阅读推广活动评价指标方案的意见,并利用在变异系数基础上改进的熵权法计算评价指标的权重。对3所高校、1个县级公共图书馆、1个县级新华书店举办的14场不同类型的单个活动进行评价,对3所高校、1个县级公共图书馆、1个县级新华书店进行单位活动评价。对1个县、1个区进行区域年度活动评价。

需要补充的是,在推进项目的过程中,项目组针对活动评价相关工作,设计近30份问卷调查,配合组织相关阅读推广活动,采集了大量数据,但是大部分作用有限。

四、成果存在的不足或欠缺,尚需深入研究的问题。

成果存在的不足或欠缺:

首先,对阅读推广活动的理论研究和实践信息分析不够深入。中文文献中对阅读推广活动效果评价的要求和呼吁的内容较多,提出活动评价指标的不多,且比较缺乏实证,即使有个别实证研究,但对于单个活动和单位活动没有进行有效区分,更缺乏区域活动的评价及其实证研究。国外文献多对于实际的阅读活动进行评价,在阅读者心理和能力的改变与提升方面较为详细,但缺乏像国内各单位、各区域有组织、系统化、规模化的阅读推广活动评价。

其次,提出的阅读推广活动评价指标体系在理论和实践上存在差距。项目组借鉴公共项目评价的理论,结合现有活动评价的研究成果,根据阅读推广活动的特点,提出阅读推广活动评价的指标体系。但在理论上与基于客户满意度的评价理论结合程度欠缺,在实践上与各类单位、各类区域的实际活动,存在结合上与沟通上的难度。

最后,设计的阅读推广活动评价系统需要丰富和完善。提出的三个层次的阅读推广活动的三级评价指标及其权重,与每一个三级指标对应的相关问题,以及每一个指标的计算方法,需要更科学、系统、严谨的研究方法和研究过程,也需要在更多的实证中得以进一步的调整,在评价系统用户界面和功能上还需要进一步丰富和完善。活动评价实证中活动组织者的类型和数量较少,不足以覆盖单个、单位和区域活动的类型,因此活动评价指标及其权重以及计算过程的科学性和系统性还需要大范围的实证与检验。

需要补充的是,在推进项目的过程中,项目组针对活动评价的相关工作,设计了近30份问卷调查,但是大部分工作对于研究的帮助作用有限。

尚需深入研究的问题:

第一,对于阅读推广活动评价指标的更加科学化和人工智能化的构建。实践中阅读推广活动的形式更加多样化和数字化,模式更加规范化和制度化,公众的阅读能力和阅读方式也在发生改变,因此阅读推广活动评价指标要更加具有普适性和针对性,可以借鉴大数据和人工智能技术和方法,收集更多的阅读活动、阅读推广活动、活动评价指标,其他相关活动评价指标等信息,利用人工智能技术,包括区块链等技术,对于提出的阅读推广活动评价指标及其权重与算法进行更科学化的扩展和完善。

第二,对于评价指标对应的问题应该更加合理化和更具可行性。评价指标对应的问题需要更多的专家、活动的主管方和组织者、活动用户、公众来参与指导和建设,以保证问题的合理性,以及实证中的可行性。随着国家全民阅读促进条例的颁布和实施,对于阅读推广活动的评价要求会更迫切和规范,这样为项目的继续开展提供了机会。

第三,阅读推广活动评价系统的改进。项目组设计的活动评价系统的功能还不完善,比如对于评价结果的显示,对于活动结果的提示与建议,对于每一个问题的描述与提示,对于活动数据的收集、分析、汇总的子功能。

在作者心里,希望出版的图书是一件艺术品,但实际上,成稿也有遗憾,甚至有瑕疵,这里面更多的是作者能力的不足,以及理论与实践的快速发展对成稿的超越。本书的出版,希望对阅读推广(全民阅读)界能有所帮助,还望阅读推广方面能出现更好的成果,本书能起到抛砖引玉的作用。

五、本课题的人员在本书中的主要工作。

岳修志对于本书全篇进行了规划、写作和整理。

姚显霞对于书中指标的统计、分析、实证进行材料整理和文字编辑,并具体负责第五章、第六章、第七章。

徐长伟及其指导的学生对于第四章中指标的权重的分析和确定做出重要贡献。

吴红艳对于第六章中指标对应的问题,提供了很好的建议和具体整理。

耿伟杰、吴红艳、赵春辉对于第三章中指标的初步确定,第四章中指标的调整、第五章中初步实证、第七章中的实证研究做了细致的工作。