三、考試結(jié)果分析和社會(huì)評(píng)價(jià)
為積累綜合考試命題工作的經(jīng)驗(yàn)，2000年理科綜合能力測(cè)試結(jié)束后，我們通過(guò)到試點(diǎn)省調(diào)查、分析統(tǒng)計(jì)數(shù)據(jù)等形式對(duì)綜合考試的情況進(jìn)行了分析和總結(jié)。現(xiàn)從以下幾方面予以介紹。
1. 考試目標(biāo)和內(nèi)容
前面介紹了2000年理科綜合能力測(cè)試計(jì)劃考查的目標(biāo)和內(nèi)容，表2-3說(shuō)明了實(shí)際考查的目標(biāo)和內(nèi)容。
表2 2000年理科綜合能力測(cè)試考試內(nèi)容和考試目標(biāo)表（山西卷）
目 目標(biāo)
內(nèi)容
試題分?jǐn)?shù)
試題總分
比率（％）
對(duì)基本知識(shí)的理解能力
設(shè)計(jì)和完成實(shí)驗(yàn)的能力
對(duì)基本知識(shí)的應(yīng)用能力
學(xué)科間綜合內(nèi)容
75(6、10、23、24、27、28)
12（25）
87
33.4
學(xué)科內(nèi)容
物理（必、選修）
69（17、18、19、20、21、22、29、30）
12（31）
81
31.2
化學(xué)（必、選修）
40（11、12、14、15、16、26）
6(13)
46
17.7
生物（必、選修）
41（2、3、4、5、7、8、9）
5(1)
46
17.7
試題總分
225
24
11
260
比率（％）
87.1
6.5
6.5
注：表中括號(hào)內(nèi)的數(shù)學(xué)表示題號(hào)，下同。
表3 2000年理科綜合能力測(cè)試考試內(nèi)容和考試目標(biāo)（三省卷）
目 目標(biāo)
內(nèi)容
試題分?jǐn)?shù)
試題總分
比率（％）
對(duì)基本知識(shí)的理解能力
設(shè)計(jì)和完成實(shí)驗(yàn)的能力
對(duì)基本知識(shí)的應(yīng)用能力
學(xué)科間綜合內(nèi)容
64(5、8、23、27、28)
10（25）
74
28.5
學(xué)科內(nèi)容
物理（必、選修）
82（15、16、17、18、19、20、21、22、29、30）
15（31）
97
37.2
化學(xué)（必、選修）
52（6、7、9、11、12、13、26）
6(13)
58
22.3
生物（必、選修）
26（2、3、4、24）
5(1)
31
11.9
試題總分
224
31
5
260
比率（％）
86.2
11.9
11.9
表4 2000年理科綜合能力測(cè)試考試內(nèi)容和考試目標(biāo)（山西卷）
目 目標(biāo)
內(nèi)容
試題分?jǐn)?shù)
試題總分
比率（％）
對(duì)基本知識(shí)的理解能力
設(shè)計(jì)和完成實(shí)驗(yàn)的能力
對(duì)基本知識(shí)的應(yīng)用能力
學(xué)科間綜合內(nèi)容
6(6、10、23、24、27、28)
1（25）
7
22.6
學(xué)科內(nèi)容
物理（必、選修）
8（17、18、19、20、21、22、29、30）
1（31）
9
29.0
化學(xué)（必、選修）
6（11、12、14、15、16、26）
1(13)
7
22.6
生物（必、選修）
7（2、3、4、5、7、8、9）
1(1)
8
25.8
試題總量
27
2
2
31
比率（％）
87.1
6.5
6.5
注：表4和5是以試題數(shù)量為標(biāo)準(zhǔn)進(jìn)行的統(tǒng)計(jì)
表5 2000年理科綜合能力測(cè)試考試內(nèi)容和考試目標(biāo)（三省卷）
目 目標(biāo)
內(nèi)容
試題分?jǐn)?shù)
試題總分
比率（％）
對(duì)基本知識(shí)的理解能力
設(shè)計(jì)和完成實(shí)驗(yàn)的能力
對(duì)基本知識(shí)的應(yīng)用能力
學(xué)科間綜合內(nèi)容
5(5、8、23、27、28)
1（25）
6
19.4
學(xué)科內(nèi)容
物理（必、選修）
10（15、16、17、18、19、20、21、22、29、30）
1（31）
11
35.5
化學(xué)（必、選修）
52（6、7、9、11、12、13、26）
1（14）
9
29.0
生物（必、選修）
4（2、3、4、24）
1(1)
5
16.1
試題總量
27
3
1
31
比率（％）
87.1
9.7
3.2
從上述表中不難看出，山西卷中理化生三科的單科試題（以學(xué)科內(nèi)綜合為主）占分比例分別是31．2％、17．7％和17．7％，學(xué)科間綜合內(nèi)容（含理化生中2科或3科內(nèi)容）的試題占分比例為33．4％（見(jiàn)表2）；三省卷中理化生三科單科試題的占分比例分別是37．3％、22．3％和11．9％，學(xué)科間綜合的占分比例為28.5％（見(jiàn)表3）。對(duì)三省卷的具體題目和及其所占分值進(jìn)行統(tǒng)計(jì)的結(jié)果顯示，理化生三科的總分分別是103、99和58，與4：4：2這一比例接近，即3個(gè)學(xué)科的占分比例與課程計(jì)劃規(guī)定的總課時(shí)數(shù)的比例基本相當(dāng)，符合命題計(jì)劃要求。從表4和5還可以看出，試卷大部分試題主要考查了學(xué)生對(duì)基本知識(shí)的理解能力（占87．1％），而對(duì)考生應(yīng)用能力以及實(shí)驗(yàn)?zāi)芰Φ鹊目疾橄鄬?duì)少一些?？荚嚭蠓答伒男畔⒈砻鳎袑W(xué)界對(duì)理科綜合能力測(cè)試的反映不一。其中比較具有代表性的意見(jiàn)認(rèn)為，就單一學(xué)科來(lái)說(shuō)，其考查的內(nèi)容相對(duì)較少，不如以往單科試卷考查全面；各科中都有一些主干內(nèi)容不能得到考查，而個(gè)別非主干內(nèi)容卻得到了考查，即試題內(nèi)容與大綱和教材的主干內(nèi)容一致性不夠充分，并認(rèn)為這對(duì)于全面衡量學(xué)生對(duì)單學(xué)科知識(shí)的掌握情況不利，擔(dān)心會(huì)給今后的中學(xué)教學(xué)帶來(lái)負(fù)面影響。閱卷教師大多是大學(xué)教師，一些教師在肯定這種考試模式的同時(shí)，也指出了考試內(nèi)容偏離學(xué)科主干內(nèi)容這一問(wèn)題。
對(duì)于“試題內(nèi)容與大綱和教材的主于內(nèi)容一致性不夠充分”這類(lèi)問(wèn)題，從教育部對(duì)高考改革的指示中似乎可以找到一些解釋?zhuān)炭荚嚕?999］6號(hào)文件明確指出，“綜合考試”首先是學(xué)科內(nèi)綜合，其次才是跨學(xué)科的綜合。由于“綜合卷”存在跨學(xué)科的試題，又是三科合卷，因此命題時(shí)對(duì)每一學(xué)科內(nèi)容的選擇一般來(lái)說(shuō)要服從于試卷或試題的總體設(shè)計(jì)和構(gòu)思，很難保證每一學(xué)科考查的都是各自學(xué)科基本、主干和核心的內(nèi)容。當(dāng)然，就學(xué)科內(nèi)綜合的試題來(lái)說(shuō)，要做到這點(diǎn)是比較容易的。值得指出的是，無(wú)論是學(xué)科的主干、核心內(nèi)容，還是非主干、核心內(nèi)容，對(duì)學(xué)生形成完整的學(xué)科知識(shí)體系和全面落實(shí)教學(xué)大綱的要求來(lái)說(shuō)，都是重要的。
2．題量
從考試結(jié)果看，試點(diǎn)省對(duì)題量和題型等情況反映不一。有的認(rèn)為試卷的長(zhǎng)度較為合理、題量基本適中；有的則認(rèn)為題量不足，考查的知識(shí)點(diǎn)偏少，對(duì)中等以上水平的考生不公平，使他們不能全面施展才能，而且在考場(chǎng)上的剩余時(shí)間過(guò)多還會(huì)帶來(lái)一定的副作用，因此希望今后試卷的題量能大一點(diǎn)；還有的對(duì)賦分值存有異議。例如認(rèn)為選擇題的單道小題的分值偏高，考生如果做錯(cuò)一道就意味著要失去5、6分，比較可惜，沒(méi)有過(guò)去單科卷中的選擇題的賦分值（每道2～4分）合理；又如在非選擇題中，有的難題反而比容易題的分值低，導(dǎo)致其與學(xué)生的實(shí)際水平和智力付出不成比例。我們認(rèn)為，對(duì)綜合卷的評(píng)價(jià)本身就有一個(gè)按什么標(biāo)準(zhǔn)的問(wèn)題，這是可以進(jìn)一步討論的。例如適當(dāng)減少題量，本來(lái)是可以增加學(xué)生的思考時(shí)間，發(fā)揮學(xué)生的思維能力的，但卻影響到對(duì)知識(shí)點(diǎn)的覆蓋度和考試的效度；又如關(guān)于非選擇題的賦分值問(wèn)題，怎樣才是合理的，是以其本身的難度還是以所考查的知識(shí)或能力的地位來(lái)確定呢？這也是值得研究的。
鑒于試卷的題量和賦分值都與試卷的滿(mǎn)分值有關(guān)，因此確定試卷的滿(mǎn)分值就變得非常重要了，我們認(rèn)為確定試卷的滿(mǎn)分值是一個(gè)比較復(fù)雜的問(wèn)題，需要考慮的方面比較多，如分?jǐn)?shù)如何使用的問(wèn)題；分?jǐn)?shù)對(duì)中學(xué)教學(xué)影響的問(wèn)題，如果綜合考試的分?jǐn)?shù)是作為高考錄取時(shí)統(tǒng)一劃定的低資格分，那么試卷滿(mǎn)分是多少關(guān)系不大；如果是作為各高校的具體投檔分，那就要認(rèn)真研究了。2000年的情況是，綜合考試分?jǐn)?shù)記入總分并參與劃線和投檔，在實(shí)際錄取中起著決定性的作用。如果將來(lái)分?jǐn)?shù)還是這樣使用，我們認(rèn)為應(yīng)該考慮對(duì)綜合卷的滿(mǎn)分作一些調(diào)整，建議在考試時(shí)間不變的情況下，適當(dāng)增加理科綜合能力測(cè)試試卷的滿(mǎn)分和題量，以便與“3＋2”科目組總分相當(dāng)，避免試點(diǎn)省和非試點(diǎn)省市高考總分的差別，造成高校錄取時(shí)對(duì)分?jǐn)?shù)理解上的差異。此外，對(duì)一些中學(xué)由于理化生三科加起來(lái)才260分，而減少這三科的課時(shí)數(shù)，從而影響今后這幾科教學(xué)質(zhì)量的事實(shí)也不應(yīng)忽視。
3．難度、區(qū)分度、信度
為積累綜合考試命題工作的經(jīng)驗(yàn)，2000年理科綜合能力測(cè)試結(jié)束后，我們通過(guò)到試點(diǎn)省調(diào)查、分析統(tǒng)計(jì)數(shù)據(jù)等形式對(duì)綜合考試的情況進(jìn)行了分析和總結(jié)。現(xiàn)從以下幾方面予以介紹。
1. 考試目標(biāo)和內(nèi)容
前面介紹了2000年理科綜合能力測(cè)試計(jì)劃考查的目標(biāo)和內(nèi)容，表2-3說(shuō)明了實(shí)際考查的目標(biāo)和內(nèi)容。
表2 2000年理科綜合能力測(cè)試考試內(nèi)容和考試目標(biāo)表（山西卷）
目 目標(biāo)
內(nèi)容
試題分?jǐn)?shù)
試題總分
比率（％）
對(duì)基本知識(shí)的理解能力
設(shè)計(jì)和完成實(shí)驗(yàn)的能力
對(duì)基本知識(shí)的應(yīng)用能力
學(xué)科間綜合內(nèi)容
75(6、10、23、24、27、28)
12（25）
87
33.4
學(xué)科內(nèi)容
物理（必、選修）
69（17、18、19、20、21、22、29、30）
12（31）
81
31.2
化學(xué)（必、選修）
40（11、12、14、15、16、26）
6(13)
46
17.7
生物（必、選修）
41（2、3、4、5、7、8、9）
5(1)
46
17.7
試題總分
225
24
11
260
比率（％）
87.1
6.5
6.5
注：表中括號(hào)內(nèi)的數(shù)學(xué)表示題號(hào)，下同。
表3 2000年理科綜合能力測(cè)試考試內(nèi)容和考試目標(biāo)（三省卷）
目 目標(biāo)
內(nèi)容
試題分?jǐn)?shù)
試題總分
比率（％）
對(duì)基本知識(shí)的理解能力
設(shè)計(jì)和完成實(shí)驗(yàn)的能力
對(duì)基本知識(shí)的應(yīng)用能力
學(xué)科間綜合內(nèi)容
64(5、8、23、27、28)
10（25）
74
28.5
學(xué)科內(nèi)容
物理（必、選修）
82（15、16、17、18、19、20、21、22、29、30）
15（31）
97
37.2
化學(xué)（必、選修）
52（6、7、9、11、12、13、26）
6(13)
58
22.3
生物（必、選修）
26（2、3、4、24）
5(1)
31
11.9
試題總分
224
31
5
260
比率（％）
86.2
11.9
11.9
表4 2000年理科綜合能力測(cè)試考試內(nèi)容和考試目標(biāo)（山西卷）
目 目標(biāo)
內(nèi)容
試題分?jǐn)?shù)
試題總分
比率（％）
對(duì)基本知識(shí)的理解能力
設(shè)計(jì)和完成實(shí)驗(yàn)的能力
對(duì)基本知識(shí)的應(yīng)用能力
學(xué)科間綜合內(nèi)容
6(6、10、23、24、27、28)
1（25）
7
22.6
學(xué)科內(nèi)容
物理（必、選修）
8（17、18、19、20、21、22、29、30）
1（31）
9
29.0
化學(xué)（必、選修）
6（11、12、14、15、16、26）
1(13)
7
22.6
生物（必、選修）
7（2、3、4、5、7、8、9）
1(1)
8
25.8
試題總量
27
2
2
31
比率（％）
87.1
6.5
6.5
注：表4和5是以試題數(shù)量為標(biāo)準(zhǔn)進(jìn)行的統(tǒng)計(jì)
表5 2000年理科綜合能力測(cè)試考試內(nèi)容和考試目標(biāo)（三省卷）
目 目標(biāo)
內(nèi)容
試題分?jǐn)?shù)
試題總分
比率（％）
對(duì)基本知識(shí)的理解能力
設(shè)計(jì)和完成實(shí)驗(yàn)的能力
對(duì)基本知識(shí)的應(yīng)用能力
學(xué)科間綜合內(nèi)容
5(5、8、23、27、28)
1（25）
6
19.4
學(xué)科內(nèi)容
物理（必、選修）
10（15、16、17、18、19、20、21、22、29、30）
1（31）
11
35.5
化學(xué)（必、選修）
52（6、7、9、11、12、13、26）
1（14）
9
29.0
生物（必、選修）
4（2、3、4、24）
1(1)
5
16.1
試題總量
27
3
1
31
比率（％）
87.1
9.7
3.2
從上述表中不難看出，山西卷中理化生三科的單科試題（以學(xué)科內(nèi)綜合為主）占分比例分別是31．2％、17．7％和17．7％，學(xué)科間綜合內(nèi)容（含理化生中2科或3科內(nèi)容）的試題占分比例為33．4％（見(jiàn)表2）；三省卷中理化生三科單科試題的占分比例分別是37．3％、22．3％和11．9％，學(xué)科間綜合的占分比例為28.5％（見(jiàn)表3）。對(duì)三省卷的具體題目和及其所占分值進(jìn)行統(tǒng)計(jì)的結(jié)果顯示，理化生三科的總分分別是103、99和58，與4：4：2這一比例接近，即3個(gè)學(xué)科的占分比例與課程計(jì)劃規(guī)定的總課時(shí)數(shù)的比例基本相當(dāng)，符合命題計(jì)劃要求。從表4和5還可以看出，試卷大部分試題主要考查了學(xué)生對(duì)基本知識(shí)的理解能力（占87．1％），而對(duì)考生應(yīng)用能力以及實(shí)驗(yàn)?zāi)芰Φ鹊目疾橄鄬?duì)少一些?？荚嚭蠓答伒男畔⒈砻鳎袑W(xué)界對(duì)理科綜合能力測(cè)試的反映不一。其中比較具有代表性的意見(jiàn)認(rèn)為，就單一學(xué)科來(lái)說(shuō)，其考查的內(nèi)容相對(duì)較少，不如以往單科試卷考查全面；各科中都有一些主干內(nèi)容不能得到考查，而個(gè)別非主干內(nèi)容卻得到了考查，即試題內(nèi)容與大綱和教材的主干內(nèi)容一致性不夠充分，并認(rèn)為這對(duì)于全面衡量學(xué)生對(duì)單學(xué)科知識(shí)的掌握情況不利，擔(dān)心會(huì)給今后的中學(xué)教學(xué)帶來(lái)負(fù)面影響。閱卷教師大多是大學(xué)教師，一些教師在肯定這種考試模式的同時(shí)，也指出了考試內(nèi)容偏離學(xué)科主干內(nèi)容這一問(wèn)題。
對(duì)于“試題內(nèi)容與大綱和教材的主于內(nèi)容一致性不夠充分”這類(lèi)問(wèn)題，從教育部對(duì)高考改革的指示中似乎可以找到一些解釋?zhuān)炭荚嚕?999］6號(hào)文件明確指出，“綜合考試”首先是學(xué)科內(nèi)綜合，其次才是跨學(xué)科的綜合。由于“綜合卷”存在跨學(xué)科的試題，又是三科合卷，因此命題時(shí)對(duì)每一學(xué)科內(nèi)容的選擇一般來(lái)說(shuō)要服從于試卷或試題的總體設(shè)計(jì)和構(gòu)思，很難保證每一學(xué)科考查的都是各自學(xué)科基本、主干和核心的內(nèi)容。當(dāng)然，就學(xué)科內(nèi)綜合的試題來(lái)說(shuō)，要做到這點(diǎn)是比較容易的。值得指出的是，無(wú)論是學(xué)科的主干、核心內(nèi)容，還是非主干、核心內(nèi)容，對(duì)學(xué)生形成完整的學(xué)科知識(shí)體系和全面落實(shí)教學(xué)大綱的要求來(lái)說(shuō)，都是重要的。
2．題量
從考試結(jié)果看，試點(diǎn)省對(duì)題量和題型等情況反映不一。有的認(rèn)為試卷的長(zhǎng)度較為合理、題量基本適中；有的則認(rèn)為題量不足，考查的知識(shí)點(diǎn)偏少，對(duì)中等以上水平的考生不公平，使他們不能全面施展才能，而且在考場(chǎng)上的剩余時(shí)間過(guò)多還會(huì)帶來(lái)一定的副作用，因此希望今后試卷的題量能大一點(diǎn)；還有的對(duì)賦分值存有異議。例如認(rèn)為選擇題的單道小題的分值偏高，考生如果做錯(cuò)一道就意味著要失去5、6分，比較可惜，沒(méi)有過(guò)去單科卷中的選擇題的賦分值（每道2～4分）合理；又如在非選擇題中，有的難題反而比容易題的分值低，導(dǎo)致其與學(xué)生的實(shí)際水平和智力付出不成比例。我們認(rèn)為，對(duì)綜合卷的評(píng)價(jià)本身就有一個(gè)按什么標(biāo)準(zhǔn)的問(wèn)題，這是可以進(jìn)一步討論的。例如適當(dāng)減少題量，本來(lái)是可以增加學(xué)生的思考時(shí)間，發(fā)揮學(xué)生的思維能力的，但卻影響到對(duì)知識(shí)點(diǎn)的覆蓋度和考試的效度；又如關(guān)于非選擇題的賦分值問(wèn)題，怎樣才是合理的，是以其本身的難度還是以所考查的知識(shí)或能力的地位來(lái)確定呢？這也是值得研究的。
鑒于試卷的題量和賦分值都與試卷的滿(mǎn)分值有關(guān)，因此確定試卷的滿(mǎn)分值就變得非常重要了，我們認(rèn)為確定試卷的滿(mǎn)分值是一個(gè)比較復(fù)雜的問(wèn)題，需要考慮的方面比較多，如分?jǐn)?shù)如何使用的問(wèn)題；分?jǐn)?shù)對(duì)中學(xué)教學(xué)影響的問(wèn)題，如果綜合考試的分?jǐn)?shù)是作為高考錄取時(shí)統(tǒng)一劃定的低資格分，那么試卷滿(mǎn)分是多少關(guān)系不大；如果是作為各高校的具體投檔分，那就要認(rèn)真研究了。2000年的情況是，綜合考試分?jǐn)?shù)記入總分并參與劃線和投檔，在實(shí)際錄取中起著決定性的作用。如果將來(lái)分?jǐn)?shù)還是這樣使用，我們認(rèn)為應(yīng)該考慮對(duì)綜合卷的滿(mǎn)分作一些調(diào)整，建議在考試時(shí)間不變的情況下，適當(dāng)增加理科綜合能力測(cè)試試卷的滿(mǎn)分和題量，以便與“3＋2”科目組總分相當(dāng)，避免試點(diǎn)省和非試點(diǎn)省市高考總分的差別，造成高校錄取時(shí)對(duì)分?jǐn)?shù)理解上的差異。此外，對(duì)一些中學(xué)由于理化生三科加起來(lái)才260分，而減少這三科的課時(shí)數(shù)，從而影響今后這幾科教學(xué)質(zhì)量的事實(shí)也不應(yīng)忽視。
3．難度、區(qū)分度、信度