漢語口語測試評分員評價研究

目錄
第1章緒論……………………………………………001
1.1研究緣起………………………………………………001
1.1.1口語測試的發(fā)展……………………………………001
1.1.2評分員評價體系研究現(xiàn)狀…………………………002
1.2研究思路………………………………………………004
1.2.1研究目的和內(nèi)容……………………………………004
1.2.2研究方法……………………………………………005
1.3研究意義………………………………………………007
1.3.1理論意義……………………………………………007
1.3.2實踐意義……………………………………………008
第2章口語測試及其評分員…………………………011
2.1引言……………………………………………………011
2.2口語和口語測試………………………………………011
2.2.1口語的定義…………………………………………011
2.2.2口語測試……………………………………………014
2.2.3語言能力……………………………………………016
2.3口語測試實踐…………………………………………026
2.3.1國外口語測試發(fā)展概況……………………………026
2.3.2國內(nèi)口語測試發(fā)展概況……………………………030
2.4漢語口語測試評分員…………………………………037
2.4.1評分員的分類………………………………………037
2.4.2評分員的特點………………………………………041
2.5評分員培訓(xùn)和評價……………………………………044
2.5.1評分員培訓(xùn)…………………………………………044
2.5.2評分員評價…………………………………………050
2.6本章小結(jié)………………………………………………058
第3章理論基礎(chǔ)………………………………………061
3.1引言……………………………………………………061
3.2構(gòu)建評分員評價體系的目的…………………………061
3.3構(gòu)建評分員評價體系的原則…………………………063
3.3.1人本性原則…………………………………………063
3.3.2科學(xué)性原則…………………………………………063
3.3.3系統(tǒng)性原則…………………………………………064
3.3.4操作性原則…………………………………………064
3.3.5激勵性原則…………………………………………065
3.3.6導(dǎo)向性原則…………………………………………065
3.4構(gòu)建評分員評價體系的作用…………………………066
3.4.1選拔…………………………………………………066
3.4.2診斷…………………………………………………067
3.4.3分數(shù)調(diào)整……………………………………………068
3.4.4研究…………………………………………………069
3.5理論來源………………………………………………070
3.5.1人力資源管理理論…………………………………070
3.5.2系統(tǒng)論………………………………………………072
3.5.3人才測評理論………………………………………074
3.5.4語言測試理論………………………………………076
3.6本章小結(jié)………………………………………………078
第4章研究假設(shè)………………………………………081
4.1引言……………………………………………………081
4.2評價體系研究的前提…………………………………081
4.2.1評分員的價值可量化………………………………081
4.2.2評分員價值是穩(wěn)定的………………………………082
4.2.3評分員價值可正常發(fā)揮……………………………082
4.3評分員評價體系的構(gòu)建………………………………082
4.3.1現(xiàn)有評分員評價體系述評…………………………082
4.3.2評分員評價體系框架………………………………086
4.4評分員“績效”評價體系的構(gòu)建……………………090
4.4.1現(xiàn)有評分員“績效”評價方式述評………………091
4.4.2確定評分員“績效”評價指標(biāo)……………………095
4.4.3“績效”評價指標(biāo)的權(quán)重問題……………………098
4.5本章小結(jié)………………………………………………099
第5章評分員嚴厲度研究……………………………101
5.1引言……………………………………………………101
5.2嚴厲度定義……………………………………………101
5.3關(guān)于嚴厲度的研究……………………………………103
5.3.1國外相關(guān)研究………………………………………103
5.3.2國內(nèi)相關(guān)研究………………………………………104
5.4多面Rasch模型…………………………………………109
5.4.1模型介紹……………………………………………109
5.4.2常用軟件……………………………………………112
5.4.3模型應(yīng)用領(lǐng)域………………………………………112
5.5實證研究………………………………………………116
5.5.1研究假設(shè)……………………………………………116
5.5.2研究對象……………………………………………117
5.5.3研究方法……………………………………………118
5.5.4研究步驟……………………………………………118
5.5.5結(jié)果分析……………………………………………120
5.5.6結(jié)論…………………………………………………124
5.6嚴厲度評價效度檢驗…………………………………126
5.6.1偏離趨勢檢驗………………………………………126
5.6.2偏離量檢驗…………………………………………128
5.7本章小結(jié)………………………………………………135
第6章評分員一致性研究……………………………137
6.1引言……………………………………………………137
6.2一致性定義……………………………………………137
6.3一致性和信度…………………………………………138
6.3.1信度概念的演變……………………………………138
6.3.2信度的重要性………………………………………147
6.3.3一致性和信度的比較………………………………149
6.4實證研究………………………………………………151
6.4.1研究假設(shè)……………………………………………151
6.4.2統(tǒng)計結(jié)果分析………………………………………151
6.4.3結(jié)論…………………………………………………154
6.5一致性評價的效度檢驗………………………………155
6.5.1對區(qū)間上限的檢驗…………………………………155
6.5.2對區(qū)間下限的檢驗…………………………………159
6.6本章小結(jié)………………………………………………160
第7章評分員內(nèi)化評分標(biāo)準(zhǔn)研究……………………163
7.1引言……………………………………………………163
7.2內(nèi)化評分標(biāo)準(zhǔn)的內(nèi)涵及鑒別…………………………163
7.2.1定義…………………………………………………163
7.2.2研究方法述評………………………………………164
7.3漢語口語測試的相關(guān)研究……………………………168
7.3.1普通話水平測試的相關(guān)研究………………………168
7.3.2漢語水平考試（高等）口試的相關(guān)研究…………171
7.4實證研究………………………………………………173
7.4.1研究假設(shè)……………………………………………174
7.4.2研究對象……………………………………………174
7.4.3研究方法……………………………………………175
7.4.4研究步驟……………………………………………176
7.4.5統(tǒng)計結(jié)果分析………………………………………177
7.4.6結(jié)論…………………………………………………181
7.5本章小結(jié)………………………………………………181
第8章結(jié)論……………………………………………183
8.1評分員評價體系的確立………………………………183
8.2評分員評價體系的應(yīng)用………………………………186
8.3創(chuàng)新之處………………………………………………188
8.3.1理論創(chuàng)新……………………………………………188
8.3.2方法創(chuàng)新……………………………………………189
8.4研究展望………………………………………………190
參考文獻……………………………………………………191
附錄………………………………………………………201
致謝………………………………………………………217

圖表目錄
表2.1技能——成分說的語言能力…………………………………………………017
表2.2普通話水平測試國測員培訓(xùn)班培訓(xùn)內(nèi)容……………………………………046
表4.1漢語口語測試評分員“素質(zhì)”評價指標(biāo)……………………………………088
表4.2漢語口語測試評分員“能力”評價指標(biāo)……………………………………089
表5.112名應(yīng)試人背景信息表………………………………………………………117
表5.2評分員信息數(shù)據(jù)庫（選段）……………………………………………………119
表5.3評分員信息數(shù)據(jù)庫（選段）……………………………………………………119
表5.4HSK（高等）口試等級分數(shù)轉(zhuǎn)化表…………………………………………120
表5.5應(yīng)試人實測成績名次和能力值名次比較……………………………………121
表5.6評分員評分結(jié)果總表（選段）…………………………………………………127
表5.76名評分員評分結(jié)果復(fù)評情況表………………………………………………130
表6.1異常評分員嚴厲度、一致性值………………………………………………156
表6.2異常評分員評分情況表………………………………………………………157
表6.312位應(yīng)試人分組情況表………………………………………………………158
表7.1評分員類型結(jié)果（異質(zhì)程度15）………………………………………………179
表7.2評分員類型結(jié)果（異質(zhì)程度10）………………………………………………180
表7.3內(nèi)化評分標(biāo)準(zhǔn)異常評分員的評分質(zhì)量………………………………………180
表8.1漢語口語測試評分員評價指標(biāo)………………………………………………184
圖2.1“語言能力一元化”模型………………………………………………………019
圖2.2Bachman的語言能力交際模型………………………………………………021
圖2.3Bachman的語言能力結(jié)構(gòu)……………………………………………………022
圖4.1人事評價體系框架的改進……………………………………………………085
圖4.2漢語口語測試評分員評價體系框架…………………………………………087
圖5.15位評分員評分結(jié)果折線圖……………………………………………………128