您當(dāng)前的位置:檢測(cè)資訊 > 實(shí)驗(yàn)管理
嘉峪檢測(cè)網(wǎng) 2020-01-06 16:18
作者:毛歆, 王青 , 蔡海燕 , 王春仁
中國(guó)食品藥品檢定研究院, 北京 102629
摘要:
目的 應(yīng)用層次分析法(Analytic Hierarchy Process,AHP)確定國(guó)家藥品監(jiān)督管理局藥品、化妝品和醫(yī)療器械監(jiān)管重點(diǎn)實(shí)驗(yàn)室評(píng)價(jià)體系各指標(biāo)權(quán)重,為評(píng)價(jià)提供基礎(chǔ)數(shù)據(jù)支撐。
方法 在現(xiàn)有評(píng)價(jià)指標(biāo)體系的基礎(chǔ)上,依據(jù)評(píng)分細(xì)則中對(duì)各指標(biāo)的重要性評(píng)分,構(gòu)建判斷矩陣,運(yùn)用層次分析法確定一、二級(jí)指標(biāo)權(quán)重。
結(jié)果 基礎(chǔ)條件、人才隊(duì)伍、近五年內(nèi)科學(xué)研究及成果、服務(wù)監(jiān)管能力和社會(huì)貢獻(xiàn)5個(gè)一級(jí)指標(biāo)的權(quán)重分別為0.0646、0.0646、0.3579、0.3579和0.1549,模型具有較好的一致性和滿意度,一級(jí)指標(biāo)CI為0.014,CR為0.01,二級(jí)指標(biāo)各項(xiàng)CI和CR值均小于0.1。
結(jié)論 指標(biāo)權(quán)重合理體現(xiàn)了各指標(biāo)在重點(diǎn)實(shí)驗(yàn)室綜合能力組成中的相對(duì)重要程度,為國(guó)家藥品監(jiān)督管理局重點(diǎn)實(shí)驗(yàn)室評(píng)估提供了量化的評(píng)價(jià)依據(jù),也為統(tǒng)一專家評(píng)分和實(shí)驗(yàn)室自評(píng)尺度以及機(jī)構(gòu)間的橫向比較奠定了基礎(chǔ),具有較高實(shí)踐應(yīng)用價(jià)值。
關(guān)鍵詞:重點(diǎn)實(shí)驗(yàn)室 評(píng)價(jià) 指標(biāo) 層次分析法 權(quán)重
重點(diǎn)實(shí)驗(yàn)室是科學(xué)技術(shù)創(chuàng)新的重要基地,是開(kāi)展高水平基礎(chǔ)研究和應(yīng)用研究、促進(jìn)科技成果轉(zhuǎn)化、聚集和培養(yǎng)優(yōu)秀人才、全面提升科學(xué)技術(shù)能力的平臺(tái)。為進(jìn)一步強(qiáng)化食品藥品監(jiān)管工作的技術(shù)支撐和技術(shù)儲(chǔ)備,2017年10月,原國(guó)家食品藥品監(jiān)督管理總局發(fā)布了《國(guó)家食品藥品監(jiān)督管理總局重點(diǎn)實(shí)驗(yàn)室管理辦法》(食藥監(jiān)科〔2017〕86號(hào))[1],并于2018年1月發(fā)布了《國(guó)家食品藥品監(jiān)督管理總局重點(diǎn)實(shí)驗(yàn)室總體規(guī)劃(2018-2020年)》(食藥監(jiān)科〔2018〕8號(hào))[2],明確了藥品、化妝品及醫(yī)療器械(以下簡(jiǎn)稱“兩品一械”)監(jiān)管重點(diǎn)實(shí)驗(yàn)室規(guī)劃建設(shè)的指導(dǎo)思想、基本原則、階段目標(biāo)、建設(shè)任務(wù)等,提出了各類重點(diǎn)實(shí)驗(yàn)室的設(shè)置領(lǐng)域和研究重點(diǎn)。
國(guó)家藥品監(jiān)督管理局本著“公平、公正、公開(kāi)”的原則推進(jìn)重點(diǎn)實(shí)驗(yàn)室評(píng)定工作,程序:依托單位自愿申請(qǐng)→省級(jí)藥監(jiān)局對(duì)申請(qǐng)材料進(jìn)行初審→重點(diǎn)實(shí)驗(yàn)室管理辦公室秘書(shū)處對(duì)材料進(jìn)行終審→專家對(duì)擬申請(qǐng)重點(diǎn)實(shí)驗(yàn)室的答辯進(jìn)行評(píng)議→專家對(duì)擬申請(qǐng)的重點(diǎn)實(shí)驗(yàn)室進(jìn)行現(xiàn)場(chǎng)核查→評(píng)定委員會(huì)進(jìn)行評(píng)定→國(guó)家藥監(jiān)局進(jìn)行公示、公布。
對(duì)重點(diǎn)實(shí)驗(yàn)室的評(píng)定本質(zhì)上是對(duì)擬申報(bào)的實(shí)驗(yàn)室的綜合能力進(jìn)行評(píng)定。目前,國(guó)內(nèi)各行業(yè)的重點(diǎn)實(shí)驗(yàn)室評(píng)定都采用設(shè)置權(quán)重化評(píng)估指標(biāo)體系對(duì)評(píng)估要點(diǎn)進(jìn)行直接打分的形式,如:科技部的國(guó)家重點(diǎn)實(shí)驗(yàn)室評(píng)估指標(biāo)體系共包括研究水平與貢獻(xiàn)、隊(duì)伍建設(shè)與人才培養(yǎng)、開(kāi)放交流與運(yùn)行管理三個(gè)方面,分別占50%、30%和20%的權(quán)重。在“兩品一械”監(jiān)管重點(diǎn)實(shí)驗(yàn)室評(píng)價(jià)過(guò)程中,為建立更加科學(xué)合理且標(biāo)準(zhǔn)量化的評(píng)價(jià)方式,本研究采用目前使用較多的層次分析法來(lái)細(xì)化每個(gè)指標(biāo)的權(quán)重。層次分析法是美國(guó)著名運(yùn)籌學(xué)家薩迪(A.L.Saaty)在20世紀(jì)70年代提出的,是一種在處理復(fù)雜的決策問(wèn)題時(shí)進(jìn)行方案比較排序的系統(tǒng)分析方法,是一種定性和定量相結(jié)合、主觀與客觀相結(jié)合、系統(tǒng)化、層次化的分析方法[3-4]。該方法從專家的主觀判斷出發(fā),在數(shù)據(jù)處理過(guò)程中又逐步剔除主觀性,將結(jié)果定量化地表達(dá)和處理,因此,較其他評(píng)價(jià)方法有較大的優(yōu)勢(shì)。
1 對(duì)象與方法
1.1 對(duì)象
本研究使用的“兩品一械”監(jiān)管重點(diǎn)實(shí)驗(yàn)室評(píng)價(jià)指標(biāo)體系是依據(jù)《國(guó)家食品藥品監(jiān)督管理總局重點(diǎn)實(shí)驗(yàn)室評(píng)定條件》(《國(guó)家食品藥品監(jiān)督管理總局重點(diǎn)實(shí)驗(yàn)室管理辦法》附件1)中所設(shè)置的指標(biāo)而建立的,由基礎(chǔ)條件、人才隊(duì)伍、近五年內(nèi)科學(xué)研究及成果、服務(wù)監(jiān)管能力和社會(huì)貢獻(xiàn)5個(gè)一級(jí)指標(biāo)及所轄的實(shí)驗(yàn)場(chǎng)所、儀器設(shè)備等30個(gè)二級(jí)指標(biāo)構(gòu)成。
1.2 方法
1.2.1 專家咨詢[5-6]
遴選20名來(lái)自國(guó)內(nèi)“兩品一械”監(jiān)管部門(mén)的專家,均從事監(jiān)管工作10年以上,熟悉專業(yè)領(lǐng)域且具有副高以上職稱,在評(píng)定條件所設(shè)置的指標(biāo)體系的基礎(chǔ)上,通過(guò)兩輪專家咨詢建立了現(xiàn)場(chǎng)核查評(píng)分表。一、二級(jí)指標(biāo)的賦值均采用層次分析法,按照評(píng)分表中各指標(biāo)的滿分,采用兩兩比較的方法,用Saaty 1~9標(biāo)度評(píng)分標(biāo)準(zhǔn)進(jìn)行評(píng)估賦分[7],見(jiàn)表 1。

表 1 層次分析法判斷矩陣標(biāo)度及含義
1.2.2 指標(biāo)權(quán)重的確定
以評(píng)分表中各指標(biāo)的滿分為基礎(chǔ),構(gòu)建比較判斷矩陣,按照公式
和
計(jì)算初始權(quán)重系數(shù),再根據(jù)公式
計(jì)算指標(biāo)的歸一化權(quán)重系數(shù)。其中aij表示矩陣第i行的第j個(gè)數(shù)字,n為矩陣列數(shù)。
1.3 統(tǒng)計(jì)學(xué)處理
采用EXCEL進(jìn)行雙錄入核查并建立數(shù)據(jù)庫(kù),權(quán)重的邏輯性檢驗(yàn)采用一致性檢驗(yàn)指標(biāo)(為判斷矩陣的最大特征根值)來(lái)進(jìn)行,矩陣的一致性檢驗(yàn)采用評(píng)價(jià)隨機(jī)一致性指標(biāo)CR=CI/RI,RI值詳見(jiàn)表 2。當(dāng)CR≤0.1時(shí),說(shuō)明判斷矩陣一致性較好,所得的指標(biāo)權(quán)重是可以接受的。

表 2 平均隨機(jī)一致性指標(biāo)RI值
2 結(jié)果
2.1 指標(biāo)權(quán)重
根據(jù)專家咨詢后構(gòu)建的評(píng)分表中各指標(biāo)的分值,構(gòu)建5個(gè)一級(jí)指標(biāo)權(quán)重的判斷矩陣,進(jìn)而得到各指標(biāo)權(quán)重系數(shù)?;A(chǔ)條件、人才隊(duì)伍、近五年內(nèi)科學(xué)研究及成果、服務(wù)監(jiān)管能力和社會(huì)貢獻(xiàn)5個(gè)一級(jí)指標(biāo)的權(quán)重分別為0.0646、0.0646、0.3579、0.3579和0.1549,具體判斷矩陣見(jiàn)圖 1。運(yùn)用同樣的方法,可計(jì)算各個(gè)一級(jí)指標(biāo)所轄的二級(jí)指標(biāo)的歸一化權(quán)重系數(shù)。以一級(jí)指標(biāo)“基礎(chǔ)條件”所轄的二級(jí)指標(biāo)為例,其權(quán)重系數(shù)判斷矩陣見(jiàn)圖 2。通過(guò)計(jì)算得到一級(jí)和二級(jí)指標(biāo)的權(quán)重系數(shù),見(jiàn)表 3。

圖 1 一級(jí)指標(biāo)權(quán)重判斷矩陣

圖 2 二級(jí)指標(biāo)權(quán)重判斷矩陣

表 3 重點(diǎn)實(shí)驗(yàn)室能力評(píng)價(jià)指標(biāo)體系一、二級(jí)指標(biāo)權(quán)重
2.2 權(quán)重系數(shù)一致性檢驗(yàn)
根據(jù)一致性計(jì)算公式,求得一級(jí)指標(biāo)權(quán)重系數(shù)判斷的一致性指數(shù)CI為0.014,隨機(jī)一致性比率CR為0.01;5個(gè)一級(jí)指標(biāo)所轄的二級(jí)指標(biāo)權(quán)重判斷一致性指數(shù)CI取值范圍為0~0.016,隨機(jī)一致性比率CR取值范圍為0~0.01。各級(jí)指標(biāo)權(quán)重CI和CR值均小于0.1,說(shuō)明判斷矩陣具有滿意的一致性,專家對(duì)各指標(biāo)權(quán)重的判斷較可靠。
3 討論
3.1 確定指標(biāo)權(quán)重的方法
確定評(píng)價(jià)指標(biāo)的權(quán)重是建立評(píng)價(jià)方法的一個(gè)重要環(huán)節(jié)。權(quán)重,也稱權(quán)重系數(shù),是指在一個(gè)領(lǐng)域中對(duì)目標(biāo)值起權(quán)衡作用的數(shù)值,它是以某種數(shù)量形式,權(quán)衡被評(píng)價(jià)對(duì)象中各個(gè)要素相對(duì)重要程度的量值[8],是指標(biāo)差異的調(diào)節(jié)籌碼。權(quán)重的賦值合理與否,直接影響評(píng)價(jià)結(jié)果的科學(xué)合理性。目前,用于確定指標(biāo)權(quán)重的方法大致可分為主觀賦權(quán)法和客觀賦權(quán)法兩大類。主觀賦權(quán)法是由專家依據(jù)自身經(jīng)驗(yàn)進(jìn)行主觀判斷而得到權(quán)重,可采用的分析方法有層次分析法、德?tīng)柗品ā⒛:治龇ǖ?;客觀賦權(quán)法則是根據(jù)歷史數(shù)據(jù)研究指標(biāo)之間的相關(guān)關(guān)系或指標(biāo)與評(píng)估結(jié)果的關(guān)系來(lái)進(jìn)行綜合評(píng)估,主要有最大熵技術(shù)法、主成分分析法、相關(guān)系數(shù)法等[9]方法。上述兩種方法都有相對(duì)合理的一面,又有局限的一面,主觀賦權(quán)法依照經(jīng)驗(yàn)確定權(quán)重系數(shù),容易受到人為因素的影響;客觀賦權(quán)法完全依賴于數(shù)理運(yùn)算確定權(quán)重的大小,又可能會(huì)與客觀實(shí)際脫節(jié)[10]。因此,在實(shí)際評(píng)價(jià)工作中,要根據(jù)具體的問(wèn)題采用合理適宜的方法,但無(wú)論采用哪種方法,都不能脫離實(shí)際情況。
3.2 關(guān)于層次分析法在方法學(xué)上的優(yōu)勢(shì)
本文采用層次分析法確定評(píng)估體系指標(biāo)的權(quán)重,在一級(jí)指標(biāo)中,權(quán)重大小依次是A3近五年內(nèi)科學(xué)研究及結(jié)果和A4服務(wù)監(jiān)管能力、A5社會(huì)貢獻(xiàn)、A1基礎(chǔ)條件和A2人才隊(duì)伍。權(quán)重最大的A3和A4指標(biāo)權(quán)重(0.3579)是權(quán)重最小的A1和A2指標(biāo)權(quán)重(0.0646)的5.54倍。在一個(gè)實(shí)驗(yàn)室中,人員、設(shè)備、設(shè)施等資源是與依托單位的投入有關(guān),而利用這些資源所取得的成績(jī)或成果,如科研課題等,才是實(shí)驗(yàn)室運(yùn)用和轉(zhuǎn)化資源能力的真實(shí)反映。國(guó)家藥品監(jiān)督管理局“兩品一械”重點(diǎn)實(shí)驗(yàn)室的設(shè)立目標(biāo)是通過(guò)組織開(kāi)展該領(lǐng)域的基礎(chǔ)研究和應(yīng)用該研究,帶動(dòng)檢驗(yàn)檢測(cè)水平和技術(shù)支撐能力的提升,最終服務(wù)于監(jiān)管。因此,服務(wù)監(jiān)管能力這一指標(biāo)必然是指標(biāo)體系中最重要的一級(jí)指標(biāo)之一。在二級(jí)指標(biāo)的組合權(quán)重中,權(quán)重最大的是B11國(guó)家級(jí)、省部級(jí)項(xiàng)目及經(jīng)費(fèi)和B13科技獎(jiǎng)勵(lì),其次是B25科研成果轉(zhuǎn)化應(yīng)用,這與設(shè)立重點(diǎn)實(shí)驗(yàn)室的初衷相吻合,也說(shuō)明在評(píng)估體系中,實(shí)驗(yàn)室過(guò)去五年所獲得的項(xiàng)目課題和取得的科研成果是評(píng)估實(shí)驗(yàn)室的重點(diǎn)和核心。組合權(quán)重次之的是標(biāo)準(zhǔn)制修訂和一級(jí)指標(biāo)A3服務(wù)監(jiān)管能力項(xiàng)下的所有二級(jí)指標(biāo)。對(duì)“兩品一械”標(biāo)準(zhǔn)的制修訂是監(jiān)管部門(mén)的重要職能之一,也是提高技術(shù)能力、提升整個(gè)行業(yè)產(chǎn)品水平的重要手段,該項(xiàng)指標(biāo)權(quán)重較高也說(shuō)明由層次分析法得到的結(jié)果與實(shí)際情況相吻合。在初始的評(píng)分表中,B11國(guó)家級(jí)、省部級(jí)項(xiàng)目及經(jīng)費(fèi),B13科技獎(jiǎng)勵(lì)和B25科研成果轉(zhuǎn)化應(yīng)用滿分均為6分,在達(dá)到得分上限的基礎(chǔ)上還可能有不同程度的加分,如果實(shí)驗(yàn)室的基礎(chǔ)分達(dá)到了6分,用該評(píng)分表是看不出差距的;同樣,標(biāo)準(zhǔn)制修訂和服務(wù)監(jiān)管能力項(xiàng)下的所有二級(jí)指標(biāo)滿分均為5分,但該研究得出的權(quán)重,可以明顯看出這些指標(biāo)之間的差距,因此,利用該權(quán)重進(jìn)行評(píng)價(jià)時(shí)也會(huì)更科學(xué)、更合理。
本文通過(guò)層次分析法計(jì)算出服務(wù)監(jiān)管能力項(xiàng)下的各個(gè)二級(jí)指標(biāo),其權(quán)重均為0.0597,總體排到第四位,與排位第一的項(xiàng)目課題和科技獎(jiǎng)勵(lì)的權(quán)重(0.0927)尚有一定的差距。建設(shè)藥監(jiān)系統(tǒng)的重點(diǎn)實(shí)驗(yàn)室,最終目的就是要讓重點(diǎn)實(shí)驗(yàn)室“服務(wù)于監(jiān)管、為我所用”。因此,為體現(xiàn)該項(xiàng)指標(biāo)的重要性,后續(xù)可考慮通過(guò)專家咨詢的方式調(diào)整指標(biāo)權(quán)重,以期對(duì)申報(bào)的實(shí)驗(yàn)室有一定的政策引導(dǎo)性。
3.3 本研究的下一步研究方向
從二級(jí)指標(biāo)的涵義來(lái)看,B11國(guó)家級(jí)、省部級(jí)項(xiàng)目及經(jīng)費(fèi),B18主要代表性學(xué)術(shù)成就與B25科研成果轉(zhuǎn)化應(yīng)用,B20指導(dǎo)和承擔(dān)檢驗(yàn)檢測(cè)任務(wù)與B24承擔(dān)監(jiān)管重點(diǎn)任務(wù)情況,這幾個(gè)指標(biāo)之間涵義略有交叉,導(dǎo)致實(shí)驗(yàn)室在準(zhǔn)備申請(qǐng)材料時(shí)不明確某一份材料該如何歸屬,也給專家打分評(píng)審帶來(lái)了困難。因此,如何厘清這幾個(gè)指標(biāo)之間的關(guān)系,如何更加科學(xué)、合理地分配權(quán)重,也是下一步工作需要關(guān)注的問(wèn)題。
本研究采用層次分析法確定“兩品一械”重點(diǎn)實(shí)驗(yàn)室評(píng)估體系的指標(biāo)權(quán)重,權(quán)重分配更為合理,評(píng)價(jià)起來(lái)更為可行有效。構(gòu)建的一套量化的重點(diǎn)實(shí)驗(yàn)室評(píng)估體系,可以用于指導(dǎo)和規(guī)范未來(lái)重點(diǎn)實(shí)驗(yàn)室的申報(bào)、評(píng)估以及建設(shè)工作,也為下一步的工作奠定了實(shí)踐基礎(chǔ)。
參考文獻(xiàn)
[1] 國(guó)家食品藥品監(jiān)督管理總局.食藥監(jiān)科[2017] 86號(hào)總局關(guān)于印發(fā)國(guó)家食品藥品監(jiān)督管理總局重點(diǎn)實(shí)驗(yàn)室管理辦法的通知[EB/OL].(2017-10-10)[2019-04-10]. http://samr.cfda.gov.cn/WS01/CL0852/178487.html.
[2] 國(guó)家食品藥品監(jiān)督管理總局.食藥監(jiān)科[2018] 8號(hào)總局關(guān)于印發(fā)國(guó)家食品藥品監(jiān)督管理總局重點(diǎn)實(shí)驗(yàn)室總體規(guī)劃(2018-2020年)的通知[EB/OL].(2018-01-19)[2019-04-10]. http://samr.cfda.gov.cn/WS01/CL0852/223265.html.
[3] 胡曉.醫(yī)院補(bǔ)償能力評(píng)價(jià)指標(biāo)體系研究[D].合肥: 安徽醫(yī)科大學(xué), 2012.
[4] 鄉(xiāng)志忠, 郭刪, 趙鵬圖, 等. 層次分析法在醫(yī)療高危模式與結(jié)果分析風(fēng)險(xiǎn)評(píng)估的運(yùn)用[J]. 中國(guó)醫(yī)院管理, 2009, 8(29): 13-14.
[5] 夏萍, 汪凱, 李寧秀, 等. 層次分析法中求權(quán)重的一種改進(jìn)[J]. 中國(guó)衛(wèi)生統(tǒng)計(jì), 2011, 28(2): 151-154. DOI:10.3969/j.issn.1002-3674.2011.02.011
[6] 漆莉, 賈慶良, 孫軍, 等. 疾病控制系統(tǒng)應(yīng)對(duì)突發(fā)公共衛(wèi)生事件應(yīng)急能力評(píng)價(jià)指標(biāo)體系研究[J]. 檢驗(yàn)醫(yī)學(xué)與臨床, 2010, 7(22): 2443-2445. DOI:10.3969/j.issn.1672-9455.2010.22.005
[7] Saaty TL, Wong MM. Projecting Average Family Size in Rural India by the Analytic Hierarchy Process[J]. J Math Sociol, 1983, 9(3): 181-209. DOI:10.1080/0022250X.1983.9989942
[8] 楊風(fēng).突發(fā)公共衛(wèi)生事件醫(yī)務(wù)人員應(yīng)對(duì)能力評(píng)價(jià)指標(biāo)選擇和初步模型構(gòu)建[D].廣州: 南方醫(yī)科大學(xué), 2009.
[9] 陳卓敏.大規(guī)模傷亡事件過(guò)負(fù)荷醫(yī)院護(hù)理質(zhì)量評(píng)價(jià)指標(biāo)體系研究[D].上海: 第二軍醫(yī)大學(xué), 2013.
[10] 韋余東, 張人杰, 張新衛(wèi), 等. 層次分析法在疾控機(jī)構(gòu)應(yīng)急能力評(píng)價(jià)指標(biāo)權(quán)重確定中的應(yīng)用[J]. 中國(guó)預(yù)防醫(yī)學(xué)雜志, 2015, 16(10): 770-773.

來(lái)源:Internet