大型資料庫國小四年級自然科學習成就評量標準設定結果之效度評估
作者:謝進昌(國家教育研究院測驗及評量研究中心助理研究員)、謝名娟(國家教育研究院測驗及評量研究中心助理研究員)、林世華(國立臺灣師範大學教育心理與輔導學系副教授)、林陳涌(國立臺灣師範大學生命科學系教授)、陳清溪(國家教育研究院院長室主任秘書)、謝佩蓉(國家教育研究院測驗及評量研究中心博士後研究員)
卷期：56卷第1期
日期：2011年3月
頁碼：1-32
DOI：10.3966/2073753X2011035601001
摘要：
學習成就評量資料庫建置目的之一，在於描述學生於各學科的學習成就表現概況；而學習成就表現的描述，即牽涉到標準設定議題。隨著臺灣學生學習成就評量資料庫對於國小四年級自然科之評量架構調整，致使沿用的表現標準已多不符合實務運用，而興起重新修訂 之舉。本研究主要目的在於評估2009 年自然科學習成就評量國小四年級標準設定結果之效度，以Kane（1994, 2001）的效度評估證據 為依據，藉由效度的過程證據、內部證據以及外部證據，作為標準設定結果之效度證據來源。結果發現，從各項效度證據來看，國小四年級自然科標準設定可由標準設定成員的組成及其回應、設定結果的一致性，以及外推論於數學成就的效度外部證據得到支持。本研究最後提出數項建議，供未來標準設定研究者參考。
關鍵詞：效度評估、書籤標定法、標準設定
《詳全文》
| 中文APA引文格式 | 謝進昌、謝名娟、林世華、林陳涌、陳清溪、謝佩蓉(2011)。跨年級中學生認知地圖之分析研究：以粒子行為試題為例。教育科學研究期刊，56(1)，1-32。doi:10.3966/2073753X2011035601001 |
|---|
| APA Format | Hsieh, J.-C., Hsieh, M.-C., Lin, S.-H., Lin, C.-Y., Chen, H.-C.,& Hsieh, P.-J. (2011). Validation of the Standard Setting Procedure for a Large Scale 4th Grade Science Assessment. Journal of Research in Education Sciences, 56(1), 1-32. doi:10.3966/2073753X2011035601001 |
|---|
Journal directory listing - Volume 56 (2011) - Journal of Research in Education Sciences【56(1)】March
Validation of the Standard Setting Procedure for a Large Scale 4th Grade Science Assessment
Author: Jin-Chang Hsieh(Research Center for Testing and Assessment, National Academy for Educational Research),Ming-Chuan Hsieh (Research Center for Testing and Assessment, National Academy for Educational Research),Sieh-Hwa Lin(Department of Educational Psychology and Counseling, National Taiwan Normal University),Chen-Yung Lin (Department of Life Science, National Taiwan Normal University),Chin-Hsi Chen(President Office, National Academy for Educational Research),Pei-Jung Hsieh(Research Center for Testing and Assessment, National Academy for Educational Research)
Vol.&No.：Vol. 56, No. 1
Date：March 2011
Pages：1-32
DOI：10.3966/2073753X2011035601001
Abstract：
One of the main purposes for constructing an academic achievement database is to understand the students’ academic performance for each content area. Standard setting is the main issue in the academic achievement. Due to the adjustment of the test blueprint for Taiwan Assessment of Student Achievement 4th grade science, the previous performance level description is outmoded for practice. Therefore, modifying the standards is necessary. The purpose of this study is to validate a science standard setting procedure designed for 2009 4th grade science students. Based on Kane’s (1994, 2001) framework for validation, this study collected procedural evidence, internal evidence, as well as external evidence using mathematics academic performance. Several suggestions are provided in the conclusion for further studies.
Keywords：validation, Bookmark method, standard setting