《(五)心理测验教学进度》由会员分享，可在线阅读，更多相关《(五)心理测验教学进度（114页珍藏版）》请在金锄头文库上搜索。
1、（五）心理測驗 教學進度：,（五）心理測驗 教學進度：,第七章參閱危芷芬譯（民88）：心理測驗。台北市：雙葉書廊 Psychological Testing 第七版 Anne Anastasi Susana Urbina,Topic 4A Basic Concepts of Validity,Case Exhibit 4.1: Research as the Essential Proof of Test Validity Validity: A Definition Content Validity Criterion-Related Validity Construct Validity
2、Approaches to Construct Validity Extra-Validity Concerns and the Widening Scope of Test Validity,Topic 4A- Key Terms,Validity 效度 Construct Validity構念效度 Content Validity內容效度Face Validity表面效度 Criterion-related Validity效標關聯效度 Concurrent Validity同時效度、Predictive Validity預測效度 Validity coefficient效度係數Regre
3、ssion equation迴歸公式 Standard error of estimate估計標準誤 Decision theory決策理論 base rate基本率 false positives假性優異（錯誤錄取） false negatives假性低劣 Convergent Validity聚斂效度discriminant Validity辨別效度 Multitrait-multimethod matrix 多元特質多重方法矩陣 Factor analysis 因素分析 Factor loading因素負荷量 Homogeneous scale同質性量尺 extravalidity co
4、ncerns效度外考量 criterion contamination效標污染,名詞解釋,Factor analysis 因素分析 是共同因素common factor分析的簡稱，是由Spearman於1904年創用，由Thurstone等加以發揚的一種多變項統計法，利用變異數-共變數矩陣或相關係數矩陣來計算，常用在研究的較後階段，具有驗證的性質 Factor loading因素負荷量代表變項（例如P個測驗）與共同因素間的相關 Homogeneous scale同質性量尺 extravalidity concerns效度外考量 criterion contamination效標污染是指因某種因
5、素而影響一份測驗的效度，通常發生在當效標是評鑑者時，若測驗分數影響了評鑑者的評定時，所得的效度就會產生誤差。,信度(Reliability):測驗是否精準(Precision)效度(Validity) :測驗是否正確(Accuracy), 信度、效度的意義,信度(Reliability):測驗是否精準(Precision)效度(Validity) :測驗是否正確(Accuracy),A：精準又正確(Reliable & Valid ),B：不精準但正確(Unreliable but Valid ),C： 精準但不正確(Reliable but Invalid ),D：不精準也不正確(Unrel
6、iable & Invalid ), 信度、效度的意義,測量與信度、效度的關係,效度的意義,傳統定義 指測驗分數的正確性。指一個測驗能夠測量到他所想要測量的特質的程度。 數學測驗的分數若主要是由語文能力來決定，這樣的測驗就無效(效度低)。 以上的定義說明一個測驗只有一個效度，事實不然，效度可依不同的方法得到不同效度。 較滿意的定義 一個測驗在使用目的上的有效性。更具體的是指測驗能夠達到某種目的的程度。,效度的特性,效度無法直接測量，但可從其他資料推論。因此使用者必須審慎判斷效度的證據是否適當或令人滿意。 效度的判斷，主要依據測驗分數的使用目的，或測驗結果的解釋。因此，效度是屬於測驗的結果，而非
7、測驗工具本身。因此，效度稱為測驗結果的效度或測驗結果解釋的效度，更為適當。,效度的特性,效度是程度上的差別，而非全有或全無的問題。因此選擇測驗時，應考慮測驗是否適合使用的需要？如果是，其效度有多高？在甚麼情境下有效？ 效度在使用的目的和情境方面具有特殊性，不宜視為普遍性的特質。對某個目的可能有很高的效度，對另一個目的可能很低。因此選擇測驗時，應依據使用的獨特目的而選用具有適當效度資料的測驗。,效度的理論,一個測驗的總變異量包含三個部分 x =co +sp +e x 總變異量 co 共同因素變異量 sp 獨特變異量 e 誤差變異量,效度的理論,共同因素 指某個測驗的變異量和其他測驗的變異量所共同
8、分享的部分。易言之，就是指兩個或兩個以上的測驗所有的共同因素。獨特因素 指某測驗的系統變異量，亦即非由其他測驗所分享的部分。,效度的理論,x /x =co /x +sp /x +e /x 效度可界定為由共同因素所造成的變異量比率。 Val.=co /x =1-sp /x -e /x ,一、效度的意義,A test is valid to the extent that inferences made from it are appropriate, meaningful, and useful.效度乃根據測驗所做推論的恰當性、意義性及合用性的程度。(教育及心理測驗標準，AERA, APA, &
9、 NCME 等，1999） 效度乃是指一項測驗在測量其所欲測的特質或行為時所具有的真確性。測驗效度以構念效度construct validity為基本統合架構。理想的構念驗證應依測驗所設定的特殊目的和用途，提供多種有關的效度證據。（包括與內容有關的效度證據、與效標有關的效度證據、與構念有關的效度證據）,效度的意義,效度是指一個測驗確能測量到它所欲測量的特質或功能的程度。,一、內容效度(content validity) 二、效標關連效度(criterion-related validity) 三、建構效度(construct validity)P.S.表面效度不是一種正式的效度。,效度的種類,
10、效度的評估方法,效度分析,內容效度(content validity)與表面效度(face validity) 內容效度指衡量工具的內容是否反映出切合研究主題、及能夠涵蓋足夠層面的程度 表面效度是指衡量工具直觀上的有效程度，又稱為一致效度(consensus validity) 效標關聯效度(criterion-related validity) 效標關聯效度又稱為實證或統計效度(empirical or statistical validity)，指測量結果和效度標準之間的相關程度 同時效度：指衡量的結果和目前的效度標準的相關程度 預測效度：指衡量的結果和未來的效度標準的相關程度 構念效度(
11、construct validity) 又稱為衡量效度(measure validity)，指衡量工具所能衡量到理論概念的程度 聚合效度(convergent validity)：指當我們採取多種工具測量同一構念時，這些工具衡量結果之間的相關程度 辨別效度(discriminate validity)：某衡量工具如果是為了測度某構念而設計，則其所得衡量結果應該和其他不是為衡量該構念而設計的工具所得的結果沒有太大的相關性,效度證據堆聚方法,傳統上將效度證據堆聚accumulate方法歸為三類： Content Validity內容效度、Face Validity表面效度 Criterion-re
12、lated Validity效標關聯效度 Concurrent Validity同時效度、Predictive Validity預測效度 Construct Validity構念效度 效度是一單一概念，任何實徵研究都可能產生測驗效度 Validity is a unitary concept and any empirical study may bear upon the validity of a test.,內容效度content validity,本質：內容效度是對測驗內容做系統化地檢驗，以確定測驗內容涵蓋所有欲測量特質的代表性試題。 方法： 以專家就教學目標選擇適當內容的試題。 建立
13、主題內容分析表以確定測驗涵蓋適當內容及適當比例的試題。 目的： 確定測驗包含具代表性的試題。 確定測驗內容不受不相關變數的影響。 是發展一份有效的測驗最基本的需求。 限制：切記過度推論到所取的行為樣本以外的行為。 應用：適用於成就測驗及精熟測驗，但不適用於性向及人格測驗。 表面效度face validity：指一份測驗在內容表面上看起來具有效度，但非真正經科學方法建立的客觀效度，一般經常與內容效度混淆。,內容效度,內容效度是指題目的內容，與評量目標的一致性程度。通常較適用在成就測驗的效度考驗上。較常評量內容效度的方法為雙向細目表(two-way specification table)：包括教
14、學目標與教材內容兩個向度。,雙向細目表 two-way specification table,一、教學目標(以橫軸表示)以Bloom所提的認知領域六個教學目標為依據：知識、理解、應用、分析、綜合、評鑑。(此次編製成就測驗的歷程，可將分析、綜合、評鑑，統合成高層次思考) 二、教材內容(以縱軸表示)以出題的範圍，表示出包含幾個不同的單元。,雙向細目表實例,以國一國文科為例,雙向細目表table of specifications 舉例以科學成就測驗為例 P.152,Content Area 認知歷程process 內容領域 事實知識 訊息能力 推論推理 天文學 8 3 3 植物學 6 7 2 化
15、學 10 5 4 地質學 10 5 2 物理學 8 5 6 動物學 8 5 3 合計 50 30 20,表面效度,表面效度缺乏系統的邏輯分析，他只是指測驗給人的第一個印象好像測量甚麼東西，而不是指測驗事實上能測量到甚麼東西。 一般而言，具有內容效度的測驗，通常也具有表面效度，反之卻不盡然。 但表面效度對一個測驗來說，仍然是很重要的，因為具有表面效度，可使受試者感到親切感，並願意合作。,效標關聯效度Criterion-related Validity,本質：效標效度是以預測一個行為目標為效標來判斷一個測驗是否有效。 種類：因效標時間不同又可分為：1. 同時效標：以診斷同時間的行為標準作為效標，來
16、判斷測驗是否有效。2. 預測效標：以未來的行為表現作為效標，以預估測驗的有效性。 一般常用的效標： academic achievement：以學業表現為效標，常應用於智力或學術性向測驗。 performance in specialized training：以特殊訓練的表現作為效標，常用於區分性向或職業性向測驗。 intermediate and ultimate criteria：以間斷或最終表現作為效標，用於成就及工作表現。 contrast group：以對照的樣本作為效標。 psychiatric diagnosis：以精神診斷為效標，常用於人格測驗。 rating：以人為評斷為效標，常用於成就或人格測驗。 previous test：以已有的心理測驗作為效標。,
