《最新如何提高研究效度教学课件》由会员分享，可在线阅读，更多相关《最新如何提高研究效度教学课件（46页珍藏版）》请在金锄头文库上搜索。
1、如何提高研究效度如何提高研究效度v何謂信度效度？v何謂工具效度？v何謂研究效度？v研究效度裡的 內在效度 和 外在效度v影響研究效度的一些因素研究效度 之1v前面提過所謂的工具效度是一個測量工具測到它宣稱可以測到被研究對象的某一特質的程度v那所謂的研究效度就是一個研究中的研究結果可以被複製的程度v研究效度高代表研究的結果被複製的程度高，也就是說研究結果的可信度高研究效度 之2v一個有研究效度的研究通常所使用的工具應該也是有效度的v上面這句話在量化的研究中一定是對的，但在質性的研究裡應該成立卻不必然就是如此。(why?)研究效度 之3v量的研究：要有高研究效度的研究一定得使用有高的信效度的測量工
2、具v質的研究：使用具有高的信效度的測量工具一定有助於提昇研究的效度，但工具的信效度卻應該只是研究效度成立的一個重要考量，不必然是全部*每一個同學請舉例或用你自己的話語解釋一遍給同組的同學聽研究效度 之4v研究結果的可信度高具有二層的含意v第一層，可能只代表研究者自己或別人在完全相同的(exactly the same)研究過程中複製研究結果的程度v第二層，才代表別的研究者在類推的族群中(generalized population) 複製研究結果的程度內部效度 v.s. 外部效度 之1v在完全相同的研究過程中複製研究結果的程度 指的是研究的內部效度(internal validity)v在類推
3、的族群中複製研究結果的程度 指的是研究的外部效度(external validity)討論問題*請試著用自己的話語討論一下上面這二句話的含意*請以Effects of Integrated Video為例內部效度 v.s. 外部效度 之2v在這裡所謂的內部和外部效度都是在談研究效度，只是我們談的更細一點而已v或者應該這麼說v如果我們想更進一步的了解研究效度，我們就不能不談內部效度和外部效度內部效度v在教育的研究情境中，那來完全相同的研究過程！v完全相同有那些要項是應該考量的6樣本相同，或除研究特質之外的特質均相同6相同的或相等的信效度的測量工具6研究情境相同或雷同6因果關係的成立外部效度v外部
4、效度求的不過就是本次研究結果類推到母群體的複製程度，也可以說外部效度看的就是本研究的推論力v推論力有那些要項是應該考量的6樣本的代表性6潛藏的變因6高預測效度的測量工具內部效度 v.s. 外部效度 之3 因此v如果一個研究要有高的外部效度的話，一定先要有高的內部效度v有內部效度的研究不一定有外部效度v有外部效度的研究一定有內部效度v說穿了，沒有人會去做一個沒有推論力的研究！內部效度 v.s. 外部效度 之4 討論問題*在討論如何提高研究效度的議題上，有沒有必要區隔內部效度和外部效度？6有，為什麼？6沒有 ，為什麼？如何提高研究效度 前面的上課中討論過談如何提高研究效度就等同於討論如何降低研究誤
5、差如何降低研究誤差v在此應該考量的是如何降低，不是消除研究誤差v有幾個重要的方向要考慮6在研究者方面(即variable control)6在研究對象方面(即sampling)6研究工具的選用(即instrumentation)如何提高研究效度 由以上的討論，我們發現影響研究效度的因素有以下的幾個重要項目值得注意v取樣(sampling)v研究工具(instrumentation)v變因控制(variable control)v多元資料檢證(triangulation)取樣 之1v主要的考量在於代表性(representativeness)和可行性(pratical)的問題v理想上，代表性是唯
6、一在取樣的過程中需要考慮的事v但在現實中，可能可行性會折殺大部分的理想性v如何在研究設計中平衡理想與現實是一個挑戰取樣 之2 取樣的過程中，有以下的幾個問題要回答v母群體為何(普查 v.s. 樣本)v取樣方法的簡介(隨機取樣 v.s.方便取樣 v.s. 立意取樣)v樣本大小的決定(how big is enough?)v取樣誤差的控制(機誤 v.s. 常誤)取樣之3 樣本的代表性應該考量的要項6取樣的方法6取樣的誤差6樣本的數目6分層取樣的分層依據為何6自願樣本的問題取樣 之4 隨機取樣方法的簡介抽籤亂數表的使用等距取樣分層取樣(stratified)(等量 v.s. 比率取樣)叢集取樣(cl
7、ustered)多階段叢集取樣隨機分派討論問題*請以Effects of Integrated Video為例，說明它的選樣方法為何？又其代表性如何？取樣 之5 樣本大小將影響研究結果的準確度6一般而言，樣本愈大準確度愈大，樣本愈小準確度愈小6根據統計學原理，準確度因樣本數的平方根而不同6例如原有25位樣本，若想使準確度增加一倍，必須增加樣本數為100。How?取樣 之66真正影響準確度的是樣本的實質大小，不是樣本佔族群的百分比6根據楊榮祥老師的文章，相關性研究通常至少要有30個樣本；在實驗研究裡，實驗組和控制組各至少需15個樣本；在調查研究中，則至少要有100個樣本6詳細決定樣本大小的方法與
8、考量，請參見楊老師文章的19-24頁取樣 之7 取樣誤差在此意指6History6Maturation6Memory effect6Statistical regression6Selection6Experimental mortality6Selection-maturation interaction如何提高研究效度 由以上的討論，我們發現影響研究效度的因素有以下的幾個重要項目值得注意v取樣(sampling)v研究工具(instrumentation)v變因控制(variable control)v多元資料檢證(triangulation)研究工具之1 研究工具(instrumenta
9、tion)在此應該考量的是6Use the right instrument! (check the manual)6Use instrument right! (check the administration)6缺少信度的測量工具不可靠6缺少效度的測量工具測非所測6缺少常模(norm)的測量工具不易解釋6沒有標準施測流程的測量工具容易衍生常誤討論問題*請以Effects of Integrated Video為例，討論常模參照(norm-reference)和效標參照(criterion-reference) 之不同及其應用研究工具之2 一般常用的信度(reliability)種類6重測信
10、度(test-retest reliability)6複本信度(parallel-form reliability)6折半信度(split-half reliability)6內容一致性(即一般常用的 reliability)6K-20信度6K-21信度研究工具之3 一般常用的效度(validity)種類6內容效度(content validity)：一般又稱為專家效度6效標效度(criterion validity)：concurrent validitypredictive validity6構念效度研究工具之4 Aikenhead對工具效度的研究結果顯示 針對相同的一個研究而言，選用6深
11、度訪談(in-depth interview)的效度最高6半結構式訪談(semi-structured interview)次之6經驗式發展的(empirical-developed)測驗工具再次之6一般的問卷(questionnaire)末之如何提高研究效度 由以上的討論，我們發現影響研究效度的因素有以下的幾個重要項目值得注意v取樣(sampling)v研究工具(instrumentation)v變因控制(variable control)v多元資料檢證(triangulation)變因控制之1 因果關係的成立在此應該考量的是6重要變因的被忽略或不被考慮6變因間的獨立性6即混淆變數、中介變數
12、的存在或其和自變項間的交互作用使研究結果的正確性大打折扣變因控制之2 潛藏的變因應該考量的要項6前測效應6實驗組的自覺6研究者的情結6重複實驗的學習效果變因控制之3 研究者情結在此應該考量的是6研究者的不自覺(teach-to-test)6月暈效應變因控制之4 變因間的獨立性6請先以張美玉老師的文章為例，討論變因間的獨立性。此研究設計的問題在那裡？6請以Effects of video的文章為例，討論變因間的獨立性。此研究設計的問題在那裡？6你覺得那一個研究的變因控制做得比較周嚴？理由，又該如何改善？變因控制之4 研究情境的控制(context)在此應該考量的是6在研究過程中的不同時間，宜保持研究情境的恆常一致6在研究過程中，除了變因之外，實驗組和控制組所得到的待遇應力求一致如何提高研究效度 由以上的討論，我們發現影響研究效度的因素有以下的幾個重要項目值得注意v取樣(sampling)v研究工具(instrumentation)v變因控制(variable control)v多元資料檢證(triangulation)多元資料檢證之1 請以Effects of integrated video為例討論其多元資料檢證的設計，以及其獨到之處 Triangulation在質性研究中佔有相當重要的地位與份量多元資料檢證之2 研究者情結的避免方式之一，就是多利用多元資料檢證。Why?
