人才測評軟件開發及其應用研究

發布時間：2011-09-13 17:40:32

點擊數：46746 次

    一、問題的提出
    人才測評是現代人力資源管理中的新技術和新方法，而計算機化測評則是現代人才測評中最前沿的課題。所謂計算機化測評即以計算機為媒體來實現對人才的測評。實現計算機化的關鍵是測評軟件系統的開發。
    測評軟件的開發有四種方式：一是測試方式的計算機化，即將現有的測評工具和方法等傳統手工紙筆操作方式在計算機上實現，如，標準化測驗、紙筆考試的試卷等。二是測評信息管理的計算機化，如測評對象的基本信息、測評結果信息等的管理等，提供便利的查詢、遠距離傳輸方式方法，以及信息的共享等。第三是對測評管理過程進行全方位的無紙筆化管理，例如通過網絡發布測評公告或信息、接受報名，其它如考場的編排、監考人員的分配、評分、測評結果的分析處理、測評報告的輸出等。四是用現代計算機技術的功能和特點在計算機上直接開發測評的工具軟件。如，自適應性測驗CAT、自動組卷題庫、虛擬情景測評等。
    我國人才測評軟件的開發研究起步于八十年代后期，由于當時計算機軟硬件技術發展水平的限制，如計算機速度慢、內存小，存儲器容量有限，DOS平臺、文字處理及圖像處理平臺軟件的功能較弱等因素致使當時研發的測評軟件水平軟低，操作復雜，通用性差，只在非常有限的范圍內使用。
    九十年代以后，隨著人才測評理論與實踐的發展，人們對測評軟件工具的需求日益迫切，特別是計算機軟硬件技術的飛躍，為人才測評軟件的發展提供了強有力的技術支持。視窗操作系統(WINDOWS)推出，使測評軟件有了一個很好的支撐平臺；多媒體技術的發展使測評軟件突破了簡單文字圖形的內容限制，測評內容更加豐富化；網絡的快速發展，使測評突破了空間的束縛，極大地提高了測評的效率。目前測評軟件已經在技術上躍進了一個大臺階，特別是多媒體技術的應用，提高了測評軟件的趣味性和吸引力，在操作上更加簡便和人性化。測評的功能上更加多樣化和綜合化，在這方面做得比較成功的是美國。如美國教育測驗服務中心(Educational Testing Service，ETS)已經在GRE和TOEFL考試上實現了無紙筆化。多數測評公司的測驗都以軟件的方式提供給用戶，美國全美軟件系統有限公司(ATA)研制出并在美國成功進行商業化運行的E-testing全程自動化測評系統，實現了從報名、抽題、閱卷評分、證書打印，到求職、招聘、人才交流、人才管理各相關領域內的網絡化運行，將測評、考核、評定、評審與人才推薦、人才交流于一體。
    與發達國家相比，我國在人才測評軟件開發方面是相當落后的。國內一些科研機構和電腦公司也在積極進行人才測評軟件的開發，比起八十年代來，技術方面有了很大的進步，但是也存在著很多問題。最突出的是測評內容的科學性問題，有些測評軟件只是將一些常見的測驗作簡單的收集，或粗略編制一些測驗，并未對其進行嚴格的檢驗。此外，系統的兼容性和維護等問題也比較突出。測評軟件功能都比較單一，有的僅是一個人機對話測試系統，有的只是一個評分系統，有的只是一個信息管理或考務管理系統，多功能綜合化的測評軟件的開發則處于探索階段。鑒于此種情況，我們決定在前期探索和實踐的基礎上，進行現代人才測評軟件的系統研發工作，并確立了測評軟件開發的"三高"標準，即高起點、高水準、高質量。本研究自1995年開始，在對國內外測評軟件進行調查和研究的基礎上，確立了人才測評軟件開發的基本原則，提出了人才測評軟件系統的功能結構。在此理論研究的基礎上開發出了《華瑞人才測評軟件系統》系列軟件。
    二、測評軟件開發的原則
    多年來在人才測評軟件開發和實際應用的經驗和教訓使我們認識到，人才測評軟件的開發方面應該遵循以下六條基本原則。
    1.科學性。所謂科學性是指測評工具與方法的科學性。科學性是測評軟件系統的根本，只有做到了測評工具的科學性，才能保證測評結果的有效性。我們所開發的測評系統采用的測評工具，大部分是經過自己研究開發的測驗量表等工具，這些測評工具在研究過程中作過多次預試和大規模常模取樣測試，項目分析結果和信度、效度檢驗均達到測驗編制的要求以上，并在一些人事測評中試用過，有良好的效果。為了方便用戶的使用，我們也將目前國內外最常用的一些標準化的心理量表以集成化的方式納入到系統中。這些量表也都經過我們的修訂和校檢。
    2.實用性。實用性是指測評工具的設置和開發要針對測評工作的實際，能夠滿足組織開展測評的需要。例如我們在開發《企業版》軟件時，在內容設置方面，考慮到企業組織選拔人才測評的需要和進行員工心理素質測評等多種需要，設置有基本能力素質測評的工具，如《一般能力傾向測驗》，也有人格、個性方面的如《個性品質測驗》、《卡特爾16PF個性測驗》量表，還有對人的氣質進行測評的工具，如《氣質測驗》，以及現實能力測驗和心理健康測驗等，如《管理能力測驗》、《心理健康量表》等。本系統的開發立足于企業組織進行人才選拔與考核和人力資源開發與管理的實際，因此所選用的測評工具有高的鑒別力。如自陳性個性測驗常會因為測試對象的虛假反應而無效，甚至做出錯誤的評價，我們在個性測驗中增加了撒謊量表使測評工具具有一定的防偽能力。
    3.公平性。將筆試、心理測驗或其它操作方式內容搬到計算機上后，由于操作平臺的變化，有可能產生較大的誤差，測評的效度受到影響。以測評內容的呈現方式為例，有的測評軟件是將試題逐題在屏幕上呈現，即一屏一題呈現的方式，這樣就將一份測驗分成多個單元，打亂了內容的連續性和整體性，不僅前后對照及修改較為困難，而且對測試內容有極大的限制(即內容的長度不能超過一屏)。本系統采用平拉開方式，測試內容在屏幕上象平攤開的書本一樣，與常規測試試卷形式一樣，試題內容的多少和形式(圖形，表格)等均不限制，縮小了計算機化測驗與紙筆測驗方式的差異。
    4.簡便性。為了使軟件有更廣泛的使用范圍，在操作方式方法上必須簡便易行。如我們的軟件操作方式都與windows操作方式相同，不需專業培訓即可掌握。輸入必要信息時，盡量少用鍵盤輸入字符，全部測試過程中，只需要在姓名一欄輸入漢字，其它都是采用option方式由被試自己選擇，當然熟悉計算機操作的也可以自己輸入各種信息，答題和修改全部用鼠標操作，即使是從來沒有用過計算機的人也極易學會這種操作方法。簡便性的另一要求是，在操作過程中，應該給測試者提供更方便的幫助功能。我們除在系統中設立有幫助文件外，我們還在軟件適當部位顯示測試的有關信息，如屏幕左上方顯示有測試的名稱、試題數量、時間限制，屏幕的左下角設立了未答題數和剩余時間的顯示欄，以提醒被試控制自己的作答的速度和時間分配，為了方便被試找到未答的題，還提供了快速搜索功能，只要一點搜索健系統就會列出未答題號，雙擊題號，系統就會自動到達該題所在的頁面。
    5.安全性。安全性包括系統運行的穩定性，測試內容、結果等的保密性等。人才測評的資料往往成為組織進行人事決策的依據，其結果對個人和組織都是非常重要的資料。因此，測評系統必須要安全運行，特別是在測評過程中不能出現障礙。否則會影響測評結果的有效性，還會給組織和個人帶來經濟和時間上的損失。作為人才測評的軟件系統。測試內容是要反復使用的，不得公開，測試的結果也應該限定在一定的范圍內。為了保證系統的安全性，我們建立了獨特的文件存儲方式，對測評內容、評分標準和常模等均進行了加密處理，其他人即使得到了文件，也無法解讀。為了控制測試結果的權限，我們把測評和結果的輸出分別作為兩個獨立的系統，測試對象只能在測評站做測試，無法知道自己或他人的測試成績。只有經過授權的管理人員才能打開結果文件。
    6.適應性。適應性是指測評系統應具有較強的適用范圍。一是軟件運行的硬件軟件環境不能有太高的要求，不需要特殊的設置和裝置，在普通的PC機上就能運行。二是測評內容，能夠滿足不同目的、不同對象測評的需要。由于操作簡便，既可用于大規模的團體統一測試，也可進行自由的個別測試，測試內容也可由主試或測試者根據需要選擇，其應用范圍很廣。可用于企業組織進行人員的招聘與選拔、公務員錄用考試、人才市場開展的人才評價等。
    三、人才測評軟件系統的結構與功能
    人才測評軟件系統正在由單一的測試功能向多功能、集成化方向發展。如果將人才測評軟件作為一大系統的話，則它是以信息管理系統為核心，由測試、題庫管理、數據輸入、數據傳輸、評定、輸出、查詢、統計分析等子系統組成。其模型如圖1所示。 
    (一)信息管理系統
    就其實質來說，測評軟件系統是一個信息獲得、處理、存儲和使用的系統，因此廣義地講，人才測評軟件系統是一個信息管理系統(MIS)。但此處是將人才測評系統作為一個具有一定內部結構和獨立功能的系統，因此此處所指的測評軟件的信息管理子系統，是一個接收并存儲其它子系統信息并為其它的子系統的運行提供信息支持的部分，同時人才測評系統也是通過信息管理子系統與其它系統發生信息交換。簡單地說，它是一個數據庫，每個子系統的信息進出都要通過這一部分，它的信息內容范圍很廣，包括被試的基本信息(報名所提供的)、被試的測試成績、有關評價標準(如常模)、有關測評活動的信息如測評公告、測評時間、場所、程序、規則、主試人員、被試人數及其分布、有關個體的評價結論(測評報告)、團體分析報告等等。由于測評信息的重要性，故信息管理系統管理和安全性是非常重要的，它是面向高級主試設計的，能夠進入信息管理系統的都是超級用戶，只有他有權進入此系統并進行一定的維護工作。信息管理系統能夠定期地自行備份。
    (二)測試系統
    測試子系統的功能主要是提供人機對話試的測評。即將測評的項目(試題、評定要素)等內容呈現的計算機屏幕上，由被試或評定人員根據計算機的提示進行答題或操作。傳統的測評軟件基本上就是一個測試系統，而且多數都只能提供文字和簡單的圖形為刺激材料，且以客觀性試題為主(評分容易)。現代多媒體技術的發展使測評內容超越了靜態的文字和圖形，能夠提供聲音、圖像等綜合性的視聽等感覺刺激材料，仿真模擬也在此基礎上產生。被試的反應也從簡單的按鍵選擇A、B、c，發展到用鼠標點擊或用手直接觸摸選擇答案，甚至能夠通過鍵盤或光筆輸入文字(如作文題、論述題、運算題等)，還能夠設計一定的裝置由被試進行模擬操作。測試系統的設計主要考慮測評對象的特點和測評材料的性質，以能夠提供最適宜的人機互動關系為準則。
    (三)題庫系統
    題庫系統的建設是測評軟件中最重要，也是難度最大的一項工作。此處所說的題庫是一種廣義的題庫概念，泛指測評設計者精心設計測評的內容，包括試卷、測評量表等測評用的材料，也包括狹義的題庫(Item Bank)，即由若干獨立的試題組成。這些材料是測評軟件中的核心機密，安全性是第一要求。此外，為了便于對這些信息進行有效地管理，能夠快速地提取和使用，還應該對試卷或試題進行編碼，并設置一定的參數，如試卷的取材范圍、適用對象、使用的頻率、試題難度、區分度等參數等。如果是狹義的題庫則還應該有根據一定條件生成試卷的功能，自適應性測評的題庫則還應該有試題參數和能力參數估計功能、選題功能和終止測試功能。
    (四)輸入系統
    廣義地說，測試系統也是一個信息輸入系統，但此處所稱的數據輸入系統是指除直接的人機對話測試以外對測評對象的基本信息及人工測評信息的輸入系統。特別是現階段測評軟件更需有一個數據輸入子系統，從我國目前的實際情況來看，還有很多地方和單位沒有普及計算機，也沒有網絡化，測評還是以紙筆等手工方式為主，但測評結果的處理卻需要計算機的幫助。再者，一些操作性的測評結果也需要通過終端輸入計算機。因此，測評軟件系統應該設計多種數據輸入接口。一般來說，鍵盤錄入方式是必備的方式，并根據測評軟件適應的對象范圍設置其它數據輸入方式接口，如OMR、掃描儀、條形碼等。
    (五)傳輸采統
    當測評的范圍擴大后，測評數據傳輸的方式與方法就會反映一個測評系統的效率。不僅社會性、綜合性的測評機構要求有及時、快速、安全的數據傳輸方式，就是一個企業內部的測評機構也需要及時獲得或交換測評的數據資料。在傳統的方式之下，往往采用郵遞、派專人護送等方式，而今則應該充分地運用網絡的優勢，通過網絡來解決這一問題。一般來說，可以通過收發Email或在網站設置定時、定期或不定期的發送頻道。
    (六)評定系統
    當測評系統中有主觀性測試項目或需要作出綜合性評價結論時，就需要評定系統。其主要功能是對主觀性測試項目進行評定，如作文評分等，一些操作性測評的內容，也可以將被試操作的錄像傳到評定系統，由專家進行評定。在人事管理領域往往需要對測評對象作出綜合性的評價結論，撰寫測評報告，這需要由測評專家來進行，不象客觀性測試可直接進行評分和轉換。評定系統就是這樣一個工作平臺。
    (七)輸出系統
    此系統的主要功能是輸出測評的信息和資料。即根據測評的規定或用戶的要求打印輸出與測評有關的資料，如測評分數、測評報告、團體分析結果、測評證書等。
    (八)統計分析
    統計分析系統主要是使用數理統計方法對測評的數據進行匯總處理，如進行加權處理、進行模糊統計、回歸分析。通過這種分析得出個體測評的綜合性數據，也可以對測評團體的數據進行分析處理，如根據積累的原始數據調整測驗的常模等，給測驗的編制者提供項目分析的結果以改進測驗編制的質量等，測評機構還應通過統計分析定期向社會或測評委托者公開測評的分析結果尋如數據的分布情況、信度、效度等資料。
    (九)查詢承統
    此系統主要是針對社會化的測評而設計的。人們可以在網絡上查詢有關資料，如測評活動信息、公告、測評項目介紹、個人資料、測評結果分析與評價、集體結果。此系統是開放式的，一般都可放到機構的主頁上，個人和機構都可以進來訪問查詢，為了保證測評者的權益和個人隱私不被侵犯，需要對訪問者的權限進行限制。
    四、人才測評軟件實例
    我們開發的《華瑞人才測評軟件系統》的功能模塊主要有輸入被試信息(報名)、測試內容管理、人機對話測試、鍵盤錄入結果、測評結果輸出(包括個體和群體)、信息維護與查詢、幫助功能等功能模塊。下面以簡圖介紹部分功能。
    五、人才測評軟件的應用情況
    我們遵循著開發、試驗、推廣的模式運行，從1997年至今，已經有100多家企事業單位在使用此套軟件中的一種或多種，例如，上海浦東新區人事局人才交流中心，上海寶隆集團(國企)，上海安普連接器有限公司(外資)，北京馬斯康電子有限公司(外資)，深圳平安保險公司總部，中外合資長飛光纖光纜有限公司，紅桃K集團，珠海市人力資源管理中心，馬應龍集團等。湖北省公務員錄用考試一直使用此套軟件進行素質測評。用戶都反映此套軟件操作簡單方便，結果有效性高，網絡化的方式測評效率極高，測評現場即可看到測評的結果，是一套非常實用的人才測評軟件，此套人才測評軟件也因獲得上海市發明協會授予的“創造發明獎”。

更多相關

人才測評的若干問題 職場測試：誰是你人生最大的絆腳石？ 就業前有4步 職業測評助你人職匹配 碎花瓶測你職場EQ 測試：你適合的工作型態