關(guān)于人才測(cè)評(píng)的可信度和有效性

    人才測(cè)評(píng)的主要工作是通過各種方法對(duì)被試者加以了解，從而為企業(yè)組織的人力資源管理決策提供參考和依據(jù)。經(jīng)過長(zhǎng)期的發(fā)展和適應(yīng)不同情況的需要，形成了多種人才測(cè)評(píng)方法。而人才素質(zhì)測(cè)評(píng)作為一項(xiàng)重要的人事技術(shù)，已經(jīng)為越來越多的企業(yè)人力資源部門所接受，而如何保證能力素質(zhì)測(cè)評(píng)中的信度和效度，也越來越受到關(guān)注。下面，就具體案例講講如何保證能力素質(zhì)測(cè)評(píng)的信度和效度。

　　一、案例背景

　　N公司是一家外資工程管理公司，成立于1998年，總部設(shè)在上海。隨著WTO的開放和工程項(xiàng)目的增多，工程公司在國(guó)內(nèi)如雨后春筍般成長(zhǎng)起來，就此拉開了人才競(jìng)爭(zhēng)的序幕。尤其是上海，工程項(xiàng)目管理人才的爭(zhēng)奪十分激烈，N公司老總越來越感覺到市場(chǎng)的壓力和人才的短缺。為了應(yīng)對(duì)市場(chǎng)壓力，保留現(xiàn)有中高層骨干人才，并讓他們“適人適位”， N公司請(qǐng)來了北大縱橫管理咨詢公司，希望通過專業(yè)評(píng)估解決這個(gè)問題。

　　二、建立人才能力素質(zhì)模型并實(shí)施測(cè)評(píng)

　?。ㄒ唬┲懈邔幽芰λ刭|(zhì)模型及測(cè)評(píng)方法的確定

　　鑒于本次測(cè)評(píng)的對(duì)象是N公司的中高層管理人才和精英人物，測(cè)評(píng)的目的是為了保留人才、適人適崗，因此經(jīng)過雙方共同探討，項(xiàng)目組在北大縱橫經(jīng)理人能力素質(zhì)指標(biāo)體系的基礎(chǔ)上，結(jié)合N公司的實(shí)際情況，選擇個(gè)人驅(qū)動(dòng)力、判斷能力、分析能力、決策能力和水準(zhǔn)、創(chuàng)新能力、客戶服務(wù)能力、影響力、項(xiàng)目管理能力、任務(wù)分配能力等作為測(cè)評(píng)因素。同時(shí)，采用廣泛用于企業(yè)人員素質(zhì)測(cè)評(píng)、方案比較、科學(xué)技術(shù)成果評(píng)比等方面的層次分析法，來確定各測(cè)評(píng)因素在管理素質(zhì)和業(yè)務(wù)素質(zhì)上的權(quán)重。

　　通過向N公司老總介紹人才測(cè)評(píng)的方法及工具，大家一致選定評(píng)價(jià)中心技術(shù)進(jìn)行本次人才測(cè)評(píng)，并主要運(yùn)用三類測(cè)評(píng)工具：心理測(cè)驗(yàn)、深度面談和情景模擬測(cè)驗(yàn)。

　?。ǘy(cè)評(píng)實(shí)施程序

　　1、設(shè)計(jì)測(cè)評(píng)題目。咨詢顧問和N公司相關(guān)人員一起，圍繞測(cè)評(píng)因素，結(jié)合N公司實(shí)際情況進(jìn)行測(cè)試題目的設(shè)計(jì)，并給出評(píng)分標(biāo)準(zhǔn)和評(píng)分參考。本次心理測(cè)試采取16PF人格要素測(cè)試，人機(jī)對(duì)話；深度面談設(shè)計(jì)了20個(gè)題目，涵蓋了測(cè)評(píng)的各個(gè)維度；情景模擬采用案例分析和主題演講兩種測(cè)評(píng)工具，其中案例分析題庫(kù)包含12題，主題演講題庫(kù)包含15題，被測(cè)人員可以從各題庫(kù)中抽取一題進(jìn)行測(cè)試。

　　2、成立測(cè)評(píng)小組。其中，測(cè)評(píng)小組成員由N公司內(nèi)部專家、外部專家，以及北大縱橫項(xiàng)目組組成。在測(cè)評(píng)實(shí)施前，對(duì)測(cè)評(píng)小組進(jìn)行培訓(xùn)，使大家能全面了解測(cè)評(píng)的程序、評(píng)分標(biāo)準(zhǔn)及方法。

　　3、實(shí)施測(cè)評(píng)。深度面談和情景模擬測(cè)試是由測(cè)評(píng)小組根據(jù)測(cè)試題目對(duì)被測(cè)評(píng)人進(jìn)行提問，被測(cè)評(píng)人根據(jù)提問回答問題，與測(cè)評(píng)小組進(jìn)行雙向溝通后，由測(cè)評(píng)小組根據(jù)評(píng)分標(biāo)準(zhǔn)對(duì)被測(cè)評(píng)人的表現(xiàn)現(xiàn)場(chǎng)打分，填入評(píng)分表；16PF人格要素測(cè)試要求被測(cè)試人進(jìn)行40分鐘的人機(jī)對(duì)話，由測(cè)評(píng)小組保存有效答卷。

　　由于不同的測(cè)評(píng)者其衡量的尺度會(huì)存在差異，為保證各個(gè)被試者成績(jī)排序的正確性，在測(cè)評(píng)時(shí)，向測(cè)評(píng)者提供“成績(jī)比較表”，供其記載各個(gè)被試者的各項(xiàng)測(cè)試的評(píng)分，便于他們進(jìn)行比較。

　　4、分析測(cè)評(píng)結(jié)果并統(tǒng)計(jì)成績(jī)。采用肯德爾和諧系數(shù)法對(duì)每個(gè)被測(cè)評(píng)者在各個(gè)測(cè)評(píng)要素上的得分進(jìn)行評(píng)分者信度分析，并結(jié)合各測(cè)評(píng)要素在管理素質(zhì)和業(yè)務(wù)素質(zhì)方面的權(quán)重，計(jì)算出被測(cè)評(píng)人在業(yè)務(wù)素質(zhì)和管理素質(zhì)上的得分。測(cè)評(píng)結(jié)束后，測(cè)評(píng)小組對(duì)被測(cè)人員進(jìn)行了問卷調(diào)查，了解他們對(duì)測(cè)評(píng)效果的看法。

　　三、本次測(cè)評(píng)為保證信度和效度所采取的措施

　?。ㄒ唬┍ＷC測(cè)評(píng)信度采取措施分析

　　1、 16PF測(cè)試采取的是計(jì)算機(jī)標(biāo)準(zhǔn)化題目的方式，計(jì)算機(jī)答題、計(jì)算機(jī)處理結(jié)果。被測(cè)試人員全部獨(dú)立進(jìn)行測(cè)試，并在規(guī)定時(shí)間內(nèi)完成了測(cè)試。

　　2、 深度面談使用了20個(gè)題目，圍繞測(cè)評(píng)因素的各個(gè)維度對(duì)被測(cè)評(píng)者進(jìn)行考察。面談進(jìn)行順利，被測(cè)人員都能較積極配合回答問題，和主試人進(jìn)行較好的雙向交流。

　　3、 情景模擬采用案例分析和主題演講兩種測(cè)評(píng)工具，被測(cè)人員從兩個(gè)題庫(kù)中各抽取1題，測(cè)評(píng)小組根據(jù)其表現(xiàn)進(jìn)行現(xiàn)場(chǎng)評(píng)估。測(cè)評(píng)得到了被測(cè)人員的積極配合，都能就問題提出自己的見解。

　　4、 為增加評(píng)分者信度，本次測(cè)評(píng)工作專門成立了測(cè)評(píng)小組，并在測(cè)評(píng)前熟悉了整個(gè)測(cè)評(píng)程序和操作；各類能力素質(zhì)附有評(píng)分標(biāo)準(zhǔn)，各類試題附有評(píng)分參考，力圖對(duì)被測(cè)試者的表現(xiàn)進(jìn)行量化分析；測(cè)評(píng)中，向測(cè)評(píng)者提供“成績(jī)比較表”，便于測(cè)評(píng)者在打分時(shí)進(jìn)行比較；測(cè)評(píng)后，采用肯德爾和諧系數(shù)來判定評(píng)分者信度的高低。

　?。ǘ┍ＷC測(cè)評(píng)效度采取措施分析

　　本次測(cè)評(píng)目的明確，因此建立的能力素質(zhì)模型和測(cè)評(píng)目的相適應(yīng)。

　　評(píng)價(jià)中心技術(shù)是現(xiàn)代人事測(cè)評(píng)的一種主要形式，被認(rèn)為是一種針對(duì)高級(jí)管理人員的最有效的測(cè)評(píng)方法。本次測(cè)評(píng)同樣采取這種方法，內(nèi)容綜合，工具多元，從不同角度，全面、客觀地對(duì)被測(cè)者進(jìn)行考察，增加了測(cè)試的效度。

　　除16PF為人機(jī)對(duì)話外，其它測(cè)試都是由各類專家進(jìn)行的，他們的能力和經(jīng)驗(yàn)增加了此次測(cè)評(píng)的效度。

　　測(cè)評(píng)結(jié)束后，測(cè)評(píng)小組對(duì)本次測(cè)評(píng)進(jìn)行問卷調(diào)查，了解被測(cè)評(píng)者對(duì)測(cè)評(píng)效果的看法。通過郵件反饋并統(tǒng)計(jì)得知，89％的被測(cè)評(píng)者認(rèn)為此次測(cè)評(píng)發(fā)揮了自己的水平，11％的被測(cè)評(píng)者認(rèn)為由于自身狀況等原因，水平?jīng)]有完全發(fā)揮。因此此次測(cè)評(píng)的效度還是比較高的。