《上海市地方高校重点学科建设验收评估指标体系研究.pdf》由会员分享,可在线阅读,更多相关《上海市地方高校重点学科建设验收评估指标体系研究.pdf(5页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、第 1 4卷第 2期 2 0 0 2年 4月 研 究与发 展管 理 R D M ANAGEMENT Vol 14 No2 Apt20O2 文章 编 号:1 0 0 4 8 3 0 8(2 0 0 2)0 2 0 0 4 6 0 5 上海市地方高校重点 学科建设验收 评估 指标 体 系研 究 郑 忠 民,周号泰,刘唯聪。,谈顺 法。(1 上海第2 2-医科大学 附属新华医院 科教部,上 海2 0 0 0 9 2;2 上海市教育委员会 科研处,上海2 0 0 0 4 1)摘要:针对上海 市教委第三批重点学科 中期评估所采用的评估指标体 系存在的动态性 和定量化方 面的缺 陷,根据重点学科建设要求和
2、制订评估指 标体 系的原则,结合专家访谈,设置 了由 3 5条定性和 定量指标组成的重点学科建设验收评估指标体系 运用专家咨询法,确立了各评估指标的权重,并确 定 了综合评估分 的计算方法。采用该方法对 2 6个重点学科 中期评估 的有关 资料进行了回顾性验证。本研究制订的评估指 标体系,在一定程度上消除了重 点学科原有水平 的不一致 对评估结果 的影 响。同时,也在一定程度 上消除主观 因素对评估结果 的影响。关键词:地方高校;重点学 科;评估指标 中 图分 类号:G3 0 4 文 献标 识 码:A l 资料来源 上海市地方高校第三批 2 6 个重点学科的相关资料来源于这 2 6个重点学科所
3、上报的 上海 市属高校重点学科建设中期评估申报表 ,以及对这 2 6 个重 点学科进行中期评估的结果。上海市 地方高校重点学科建设验收评估指标体系的构成及指标权重,来 自于上海市地方高校中从事重 点学科建设管理的相关专家,以及各重点学科学科带头人的 De l p h i 法调查问卷 2 指标体 系建立和评估方法(1)市教委第三批重点学科建设 中期评估的评估结果分析。将评估结果为优的学科作为一 组,将 良和 良一 的学科合并为另一组,进行两样本均数比较 的 t 检验(方差不齐时用 检验),数 据 均 由 S AS(S t a t i s t i c a l An a l y s i s S y
4、s t e m)软件 处理。(2)指标体系的组成。在查阅文献及分析中期评估结果的基础上,应用 D e l p h i 专家问卷法,半开放式征询专家意 见,专家在问卷中指标体系的基础上增删指标,并就指标 的重要性给出权 重。问卷中同时给出各指标的具体涵义及计算方法,使专家在对各层指标的应答过程中,能始终 保持一总体的理解。(3)指标权重的计算 采用平均数法【计算权重系数。对平均数归一化处理,得到各层指标 的权重系数值。最后用 S a a t y氏提 出的乘积法计算组合权重系数嘲。(4)综合评估分的计算。采取综合评分方法 ,把指标分解成具体项 目,计算各指标的实测 收稿 日期:2 0 0 1 一
5、o 8 2 8 作者简介:邦忠民(1 9 6 9 一),男,社会 医学与卫生事业管理专业硬士,助理研究员,科教部副主任。*全 国高校科研管理研 究会 五届一次学术年会交疽论文 维普资讯 http:/ 第 2期 郑忠民等:上海市地方高校重点学科建设验收评估指标体 系研究 值,然后累计分数进行综合评估分的 计算。计算公式为S 一 S W,式中:s 为 综合评估 分;为 指标数 目;s,为第 z 项指标的评分;为第。项指标的组合权重。对于指标体系中的定性指标,S 分别按评估专家的打分等级“优”,“中 差”,对应为 1,0 5,0。对于指标体系中的定量指标,s。可按下列数学方法计算:s 一(x 一 6
6、)(a一6),式 中:x 为 被评估重点学科某项定量指标的实测值,n为所有被评估学科该项指标 的最大实测值 6为所有 被评估学科该项指标的最小实测值。(5)验收评估指标体系的回顾性验证。根据所制定的验收评估 指标体 系,运 用综合评分方 法,分别计算 2 6 个重点学科的综合评估分,以综合评估分的 P s 和 P s 百分位数为标准值,确定 各重点学科“优”、“良”、“良一”的评估等级,与中期评估的等级结果进行 比较分析。3 结 果 3 I 中期评估 的结果 分析 中期评估相关数据的统计结果提示,虽然被评 为优的学科各项评估数值都大于被评为良、良一 的学科,但是除 了获国家级 奖省市部委级奖以
7、及在滨博士生数三项指标有显著差别(P 0 o s)#F,其余指标并无显著差别。经过对专家和科研管理人员的访谈,以及查 阅学科的 申报材 料,发现被评为优的学科在重点学科建设立项前,在相关学科领域的整体学术水平都已经达到或 接近国内领先,一些学科甚至达到国际先进水平,学科各方面的基础较 为雄厚。而被评为良一 的学 科则受各种条件限制,原有的工作积累与基础较 为薄弱,立项时并不能达到真正意义上的“重点 学科”的标准,因此,虽经努力,但中期评估时与其他学科相 比仍有较大差距,得分较低。上述结果 表 明,中期评估指标体 系虽然能够较好地反映各重点学科中期评估时在学科建设各方面的现状,体现各重点学科 间
8、的总体差距。但是中期评估的结果与各学科原有基础的好坏密切相关,未能全 面、准确地评估各重点学科通过建设所取得成效的大小,区分度较差。3 2 重点学科建设验收评估指标体 系及权重系数 本 次调查的专家积极系数(咨询表的回收率)第一轮 为 7 8 (2 5 3 2),第二轮 为 1 0 0 (1 o 1 0)。其 回收的咨询表的回答有效率第一轮为 8 4(2 1 2 5),第二轮为 1 0 0 (1 o o)。调查数据 可进行统计学推断。运用 D e l p h i 法,并通过对两轮咨询表结果的统计计算,得出表 1 所示的由 4 项级指标、1 0 项二级指标和展开的 3 5 项三级指标构成的重点学
9、科建设验收评估指标体系。3 3 验收评估指标体系的回顾性验证结果 采 用 2 6 个重点学科上报的 上海市属高校重点学科建设中期评估 申报表 中的有关资料计 算各重点学科的综合评估分,并与中期评估结果进行比较分析,从而对验收评估指标体 系进行回 顾性验证。以 2 6个学科综合评估分的 P s 位数、P s 位数为标准值进行判定,两种评估结果基本一 致 但是验收评估指标体系评怙分数具体,区分度良好,并可明确显示评估分数的具体来源构成 因果确切、客观、重复及接受性 比较好。4 讨 论 4 1 验收评估指标体 系构建所遵循的原则与方法 重点学科建设的验收评估是对重点学科在一定时间和条件下是否按建设要
10、求开展工作以及 维普资讯 http:/ 4 8 研 究与 发 展管 理 第 1 4卷 表 l重 点 学科 建 设验 收 评 估 指标 体 系 及 权重 所取得的建设成绩和效果的价值判断。重点学科建设的要求总是原则、笼统的,难以直接评估。为 了提高评估结果的科学性,需要将重点学科建设的要求逐步分解到形成一组可 以直接测量的指 标,这是设置重点学科建设验收评估指标体系的基本途径和方法。在设置重点学科建设验收评估 维普资讯 http:/ 第 2 期 郑 民等:上 海市地方高校重点学科 建设验收评估指标体系研 究4 9 指标体系时,本研究遵循:与目标一致 眭、科学性、可行性、动态性等原则 6 一。强调
11、遵循动态性原 则是 由于重点学科建设周期一般为 5年,除重点学科建设的立项评估是“择优性”评价外,中期评 估、验收评估都是“认可性”评价,因此,重点学科建设验收评估指标体系的制订,应体现重点学科 通过一段时间的建设所取得的进展。以往重点学科建设评估时,多采用由定性指标所组成的评估 指标体系。这种定性评估方法着重评估重点学科经过一段时间的学科建设后某一时间点上的状 况,评审结果对反映重点学科的现状具有一定的可靠性,但存在一些缺陷:1)评估指标缺乏动态 性,忽视评估一个学科通过重点学 科建设所取得的进展,侧重于不同学科间的横 向比较,造成原 先基础好的学科在评估 中普遍都得高分,而原先基础比较差的
12、学科 即使通过重点学科建设取得 了很大 的进展,在评分上却不如基础好但进展不大的学科;2)评估指标体系缺乏定量的评价指 标,以定性指标为主,评估指标等级的划分也多以笼统的文字来表述,导致实际操作中 评估人员 往往根据各 自不同的理解来打分,影响了评估标准的一致性 及评估的客观性。重点学科建设验 收评估与中期评估都属于“认可性”评估,因此它们之间有着相同的共 眭,针对 中期评估指标体系 中存在的问题,本研 究的设置验收评估指标体系时,对此作了相应的改进。4 2 指标权重系数的计算 在第二轮调查 中,为有效 防止专家简单地向中位数靠扰,而不提出新判断和论据的倾 向,并 保证 收敛专家的意 见,本研
13、究没有按照常规的 D e l p h i 法嗍,在第二轮反馈结果 的中位数和四分 位数,而是反馈给应答专家每项权重分数顺位的前三个分数以及第一轮专家对指标体系提出的 主要意见和修改意见,应答专家可根据反馈结果重新选择或重新打分。4 3 两种评估结果存在差异的原因 以往的评估指标体系,偏重干评估重点学科的一定时间点上的现状,而本文研究制订的评估 指标体系则注重测量学科在建设前后各评估指标的“增长疽”,以此评估 重点学科建设的进展与 成 效。本研究筛选 出的指标是精选那些代表性好,灵敏度高、特异性强、易于测量的指标,以利于在 有限的条件下,最大可能地合理利用主要指标,能基本体现重点学科建设的共同属
14、性,描述 出其 建设成效 的 主要 方 面和重要 特征。参考文献 1 杨树勤 卫生统计学(第 2版)D d。北京 人民卫生出版社,1 9 8 8 3 5。2 柯惠新,黄京华,沈浩。谓查研究 中的统计分析方法 M。北京:北京广播学院 出版社,1 9 9 2 3 6 0。3 胡显伟。直用目的规 划法与广义距 离法综合评价教师工作质量的探索 与分析r J 数理兢计与管 理,1 9 91,2:2 6。4 吴述尧。同行评议 方法论 M。北京:科学出版社,1 9 9 6 5 4 5 杨树勤。中国医学 百科全书。医学统计学 M。上海:上海科学 技术 出版社,1 9 8 5。1 0 1。6 3 刘海林,姚树印
15、。医学科研管理学 M。北京:人民卫生 出版社,1 9 9 1。3 0 2。7 3 高校研究机构评估方 案课题组 高校研究机 构评估的指导思想、原 则和指标体系设计厂 J 。研究与 发展 管 理,1 9 9 0,2(2):3 8 苏子仪。自然科学 基金项 目评价指标体 系的研究 厂 J 。研究与发展管理、1 9 9 0,2(1):4 6。维普资讯 http:/ 5 0 研 究与发展管理 第 1 4卷 A St udy on Eval uat i on I ndex f o r Che c ki ng Ke y Su b j e c t Co ns t r uc t i o n i n Shang
16、hai L ocal H i gh I ns t i t ut i ons ZHENG Zhong m i n ,ZHOU J i ng t ai,LI U W ei c ong ,TAN Shu n f a (1 De a r t me r d Scie n t i f i c Re s e ar c h a n d Edu c at i o n,X mh u a H o*:o i l a t A t t a c h e d“h a n g 口 N o 2 M e di c a t Un i v e r*#y,Sh a u gh a i 2 0 0 0 9 2,Ch i n a;2-Di v
17、 s i o n S c i e n c e a n d Te c h n o l o g y,8k an gh a l Ed uc a l i o n Co mmi t t e e,Sh au gh a i 20 0 0 4 1Chi n n)Ab st r a ct:Looke d at t he de f ec t s i n dyna m i c chang e a nd quan t i f i c at i on of e val ua t i on i nde x s yst e m use d i n e va l u a t i n g t h e t h i r d g r
18、 o u p o f k e y s u bj e c t s s e l e c t e d b y S h a n g h a i Ed u c a t i o n Co mmi t t e e,a c c o r d ing t o t he r e q u i r e me n t o f ke y s u b jec t c on s t r u c t i o n a nd p r i n c i p l e s o f e s t a b l i s hi n g e v alu a t inn i n d e x s y s t e m,an d co m bi n e d w
19、i t h e xp e r t i n t e r v i e w,i t es t a bl i s h e d a n e v a l u a t i on i n d e x s ys t e m w h i c h in c l u d e s 3 5 i t e ms a n d证 us e d t o c h e e k mi d-t e r m k e y e u b】e e t c o n s t r u c t i o nThe we j g h t o f e a c h e v a l ua t i o n i nd e x a n d t h e m et ho d
20、of co m pr e hen si ve ev al ua t i on 0 2 e define d w i t h t h e m et hod of exp er t C OI L Sul t at i on W i t h t hi s me t ho d,t h e d a t a o f mi d t e r m e va l u a t i o n f r o m 2 6 k e y s u b j e c t s i s v e r i fie dTh e e v a l u a t inn i n d e x s yst e m e s t ab l i s he d i
21、 n t his s t udy h as e l i m i na t ed c er t ai n i m pa c t s t o t he ev a l u at i on r es ul t s c aus e d b y t he or i gin al l e v e l o f t h e k e y s u b】e ctS At t h e s a me t i me,i t e l i mi na t e d t h e s u bjec t i r e i mp a c t s t o t h e e v a l u a t i o n r e sui t s w i t
22、 h t he qua nt i f i e d i nde x Ke y wo r d s:l o c a l h i g h ins t i t u t i o n;k e y s u b j e c t se v a l u a t i o n i nd e x (上接 第 1 6页)A St udy on M e a s ur i ng Ent e r pr i s e I nt e l l e c t ual Capi t a l W ANG Yo n g,XU Q i n g r u i (1 n s t i e n t e Ma a a g e me m S c i e c t,
23、Z h e j i a u o Uu e r s i t y,Ha n z h o u Z k e j i a n g 3 1 0 0 2 7,C h i a a)Ab st r a ct:I n knowl e dg e b a se d e co nomy,i nt e l l ec t u al c api t a ha s be co m e t he most i mpor t a nt r e sok l r ce of or gani z at i o n-Bas e d o n an al y z in g t h e co nc ept and co nnot at i on
24、 of i nt e l l ec t ual c api t a l,co m b i ni ng t he m od el o f i nt el l e ct ual ca pi t al m ana gem ent,i t pr ovi des a f r a m e w or k f or va l ue m ea sur em e nt of i r l t e l l ec-t ual c api t a l s t oc k,n on f an ci al v al ue m e as ur em ent of i n t e l l e c t ua l ca pi t al el em ent s and t he m e;sur e m e nt of t he i nt e l l ec t ual ca pi t al flow Ke yz,or ds:i nt el l e ct u al ca pi t al;mana geme nt m ode l;m e as ur ement 维普资讯 http:/