8)<&,(- =<.$352*5$MOWANIA ICL DO SZACOWANIA PARAMETRÓW KRZYWEJ CHARAKTERYSTYCZNEJ ZADANIA

Wielkość: px

Rozpocząć pokaz od strony:

Download "8)<&,(- =<.$352*5$MOWANIA ICL DO SZACOWANIA PARAMETRÓW KRZYWEJ CHARAKTERYSTYCZNEJ ZADANIA"

Artur Rogowski
4 lat temu
Przeglądów:

1 MAREK KRYNIEWSKI =HVSyá6]Nyá(QHUJHW\F]Q\FKZ*GDVNX 8)<&,(- =<.$352*5$MOWANIA ICL DO SZACOWANIA PARAMETRÓW KRZYWEJ CHARAKTERYSTYCZNEJ ZADANIA 1. Przypomnienie trójparametrycznego modelu IRT Najlepszym modelem do zastosowania w pomiarze dydaktycznym jest model trójpaudphwu\f]q\-hvwrqprghohpqdmrjyoqlhmv]\pvirupxárzdq\psrud] SLHUZV]\SU]H]%LUQEDXPDU:PRGHOXW\PSU]\MPXMHVL*HSUDZGRSo- GRELHVWZR XG]LHOHQLD SUDZLGáoZHM RGSRZLHG]L QD ]DGDQLH WHVWRZH ]DOH*\ RG trzech parametrów chaudnwhu\]xmf\fkwr]dgdqlh F MHJRPRF\Uy*QLFXMFHM parametr a, F WUXGQRFL]DGDQLDWHVWRZHJR parametr b, F ZVSyáF]\QQLND]JDG\ZDQLD parametr c. )XQNFMRSLVXMF]ZL]HNPLG]\SUDZGRSRGRELHVWZHP3 i (θ) udzielenia odsrzlhg]l SUDZLGáRZHM QD L-te zadanie D SR]LRPHP ZLHG]\ XPLHMWQRFL w znormali]rzdqhmvndolpr*qdsu]hgvwdzlümdnr 1 c P() i i θ = ci +, 1+ e D ai ( θ bi) i = 1, 2,..., n gdzie: n LORü]DGDZWHFLH c i ZVSyáF]\QQLN]JDG\ZDQLDGODL-tego zadania, b i ZVSyáF]\QQLNWUXGQRFLGODL-tego zadania, a i ZVSyáF]\QQLNPRF\Uy*QLFXMFHMGODL-tego zadania,, e OLF]ED(XOHUDZSU]\EOL*HQLXH MHVWX*\ZDQDMDNRSRGVWDZD logarytmu naturalnego, D VWDáDPDNV\PDOL]XMFDGRSDVRZDQLHNU]\ZHMORJLVW\F]QHMGRogivy roz NáDGX normalnego; D=l,7. 1DMF]FLHMERZLHPDE\U]HWHOQRüREOLF]HSRGF]DVHVW\PDFMLZVSyáF]\nników a, b, ce\ád]dgrzdodmfdwu]hedsu]hwzru]\ügdqhx]\vndqh]su]hedgdqld przynajmniej 1000 osób.

2 498 Marek Kryniewski a=1,19 b= 0,25 c=0,19 5\V3U]\NáDGNU]\ZHMFKDUDNWHU\VW\F]QHMGODRNUHORQ\FKSDUDPHWUyZ 8*\FLHM]\NDSURJUDPRZDQLD,&/ 'RVWSGRM]\NDSURJUDPRZDQLD,&/ :LHOHRVyE]DMPXMF\FKVLSRPLDUHPG\GDNW\F]Q\PFKWQLHRERNNODV\Fz- Q\FKPLDU]DVWRVRZDáRE\PLDU\SUREDELOLVW\F]QH.RQLHF]QHZLFVWDMHVLSRVLadanie SURJUDPyZ NRPSXWHURZ\FK NWyUH XPR*OLZL REOLF]HQLH PLDU SUREDELOi- VW\F]Q\FK'RVWSQHVNRPHUF\MQHSURJUDP\NWyU\FKFHQDQLHMHVWSU]\VWSQD GOD RVRE\ FKFFHM SRGMü SLHUZV]H SUyE\ REOLF]H]X*\FLHP WHRULL SUREDELOistycznej. Istnieje jednak darmowe i SURVWHQDU]G]LHNWyUHPR*HE\ü]DVWRVRZDQH SU]H]RVRE]DMPuMFVLSRPLDUHP-HVWQLPM]\NSURJUDPRZDQLD,&/:FHOX NRU]\VWDQLD ] WHJR QDU]G]LD NRQLHF]QH MHVW FLJQLFLH ],QWHUQHWX SOLNX icl_win.zip. Plik icl_win.zip zawiera: F icl.exe program obliczeniowy, F icl_manual.pdf SRGUF]QLNX*\WNRZDQLD F release_notes.txt DNWXDOQQRWDWNRZHUVML,&/ F examples IROGHU]SU]\NáDGDPL 3OLN WHQ E\á XGRVWSQLRQ\ SRG DGUHVDPL ZZZE-a-h.com/software/irt/icl/. oraz mirror.optusnet.com.au/sourceforge/s/ss/ssm/ Po rozpakowaniu pliku icl_win.zip program icl.exemhvwjrwrz\grx*\fld IstnieMUyZQLH*ZHUVMHGODV\VWHPyZRSHUDF\MQ\FK0DFRUD]/LQX[

3 8*\FLHM]\NDSURJUDPRZDQLD,&/GRV]DFRZDQLDSDUDPHWUyZNU]\ZHM 499 3RGVWDZ\SUDF\]M]\NLHP,&/ 3URJUDPPR*HSUDFRZDüZGZyFKWU\EDFK 1. tryb komend po uruchomieniu programu icl.exe uruchamiane jest okien- NR SU]\SRPLQDMFH RNLHQNR '26 ]H ]QDNLHP ]DFKW\ WHUD] PR*HP\ Z\GDZDüNomendy, 2. tryb wsadowy, który uruchamiany jest poprzez wydanie komendy: icl.exe plik_komend.tcl. Wygodne jest napisanie pliku typu BAT (plik taki tworzymy QSZQRWDWQLNXMDNR]Z\Ná\SOLNWHNVWRZ\QDOH*\W\ONRSDPLWDü DE\ZQD]ZLHMDNRUR]V]HU]HQLHQDGDü%$7QSXUXFKRPEDWDZQLPtylko jedna linijka, np.icl.exe oblicz.tcl, gdzie oblicz.tcl to plik, który zawiera NRPHQG\ M]\ND,&/ 2VRELFLH SROHFDm tryb wsadowy. W celu skorzystania]whjrm]yndqdoh*\qdslvdüsoln%$7rud]solnw\sxwfowh*mdnr SOLNWHNVWRZ\3OLNW\SX%$7PR*QDXUXFKRPLüSRSU]H]SRGDQLHMHJRQa- ]Z\ZRNLHQNX8UXFKRPNWyUHMHVWRVLJDOQHSRNOLQLFLXSU]\FLVNX6WDUW Podstaw\M]\ND,&/ 3RGVWDZ\M]\NDZ\WáXPDF]QDSRGVWDZLHWUHFLSOLNXW\SXWFO :WUHFLSOLNXW\SXWFOPRJ]QDMGRZDüVLOLQLH]DF]\QDMFHVLRG]QDNX 6WRNRPHnWDU]HLJQRURZDQHSU]H]SURJUDP0RJLVWQLHüUyZQLH*SXVWHOLQLH NWyUH V UyZQLH* LJQRURZDQH :\WáXPDF]HQLD SRV]F]HJylQ\FK NRPHQG M]\ND,&/]QDMGXMVLZWUHFLSOLNXW\SXWFO]QDMGXMFeJRVLSRQL*HM:\WáXPDF]HQLD WHVZ\NRQDQHMDNRNRPHQWarze po znaku #. 7UHüSOLNXW\SXWFORQD]ZLHDUW\NXOWFO # # tresc pliku artykul.tcl # # Szacowanie parametrow a,b,c dla modelu IRT GOD]DGDZLHORNURWQHJRZ\ERUX # testu konkursu informatycznego # dla uczniow gimnazjow # Gdansk (2003) # instrukcja okreslenia pliku wyjsciowego # nazwa pliku artykul.log output -log_file artykul.log # dla 30 zadan WW beda szacowane parametry a,b,c allocate_items_dist 30 # Wczytanie odpowiedzi na zadania WW z pliku artykul.dat # Kazdy wiersz zawiera odpowiedzi jednego ucznia # 30 zadan z konkursu sa w kolumnach od 1 do 30

4 500 Marek Kryniewski read_examinees artykul.dat 30i1 # Start szacowania parametrow a,b,c dla wszystkich zadan WW starting_values_dichotomous # wykonanie EM iteracji dla obliczen szacowanych parametrow a,b,c # maksymalnie 50 EM iteracji EM_steps -max_iter 50 # zapisanie parametrow a,b,c oraz # rozkladu badanej cechy # (wiedzy-->niewidocznej[latent], odseparowanej[discrete]) print -item_param -latent_dist # zakoncznie procesu szacowania release_items_dist 7UHüSOLNXZ\QLNRZHJRW\SXORJRQD]ZLHDUW\NXOORJ 3RQL*HMSU]HGVWDZLRQ\MHVWSOLNNWyU\MHVWZ\QLNLHPG]LDáDQLDSURJUDPXQa- SLVDQHJR]X*yFLHPM]\ND,&/ IRT Command Language (ICL) Version Jul 11, :19 Command file artykul.tcl WXWDMMHVWWUHüSOLNXW\SXWFO Number of items: 30 Number of latent variable points: 40 Number of examinee groups: 1 Default prior for a-parameters: beta a: b: lower limit: upper limit: Default prior for b-parameters: beta a: b: lower limit: upper limit: Default prior for c-parameters: beta a: b: lower limit: upper limit: Read 392 examinee records from file artykul.dat EM iterations (iteration: parameter criterion, marginal posterior mode)

5 8*\FLHM]\NDSURJUDPRZDQLD,&/GRV]DFRZDQLDSDUDPHWUyZNU]\ZHM 501 1: : WXWDMVZ\QLNLNROHMQ\FKEOGyZLWHUDFML 15: : Item Parameter Estimates (a, b, c for 3PL, 2PL, 1PL; a, b1, b2,... for GPCM, PCM) ZVSyáF]\QQLNLGRVWSQHZWDEHOL Discrete Latent Variable Distributions (point, probability for group 1, 2, etc) e e e e e e e-005 7UHüSOLNXGDQ\FKW\SXGDWRQD]ZLHDUW\NXOGDW Pojedynczy wiersz to odpowiedzi jednego ucznia: 0 ]ádrgsrzlhg( SRSUDZQD RGSRZLHG( : NROXPQDFK ]QDMGXMH VL ]DSLV SRV]F]HJyOQ\FK ]DGD testoz\fk3olnwhqmhvwsolnlhpwhnvwrz\ppr*he\üz\nrqdq\znotatniku SR]RVWDáHGDQH

6 502 Marek Kryniewski 8*\FLHM]\ND,&/GODSRUyZQDQLDSDUDPHWUyZNODV\F]Q\FKRUD],57 Zestawienie parametrów klasycznych oraz IRT,QWHUHVXMFHZ\GDMHVL]HVWDZLHQLHNODV\F]Q\FKSDUDPHWUyZWHVWX]SDUDPe- WUDPL,573RQL*V]H]HVWDZLHQLHZ\NRQDQRGODWHVWXNWyU\E\áF]FLNRQNXUVX informatycznego dla uczniów gimnazjów przeprowadzonego w województwie SRPRUVNLP Z U 7HVW ]DZLHUDá ]DGD :: ] F]WHUHPD PR*OLZ\PL GR wyboru odpowiedziami. UczestniF]\áRZQLPXF]QLyZ 7DEHOD=HVWDZLHQLHSDUDPHWUyZNODV\F]Q\FKRUD],57GODSU]\NáDGRZHJRWHVWX numer zadania ZVSyáF]\nnik Uy*QLFRZDQLH WUXGQRü zgadywania a-irt klasyczna b-irt klasyczna c_irt 1 0,712 0,388 0,651 0,515 0, ,104 0,000 4,122 0,829 0, ,486 0,154-3,847 0,041 0, ,097 0,207 1,767 0,510 0, ,777 0,358 1,692 0,696 0, ,738 0,409-1,019 0,214 0, ,530 0,296 1,930 0,666 0, ,642 0,359-1,172 0,202 0, ,096 0,133 0,967 0,408 0, ,188 0,469-0,248 0,347 0, ,159 0,434 1,401 0,763 0, ,562 0,336 1,638 0,811 0, ,286 0,373 1,156 0,615 0, ,620 0,310-1,406 0,176 0, ,652 0,220 2,775 0,732 0, ,948 0,321 1,679 0,714 0, ,773 0,425-0,150 0,372 0, ,467 0,342-0,222 0,355 0, ,622 0,337 1,664 0,648 0, ,034 0,409 1,523 0,773 0, ,747 0,433 1,164 0,666 0, ,528 0,316 0,199 0,408 0, ,993 0,438-0,716 0,242 0, ,526 0,282-1,782 0,156 0, ,197 0,187 1,355 0,457 0, ,475 0,229 2,560 0,689 0, ,920 0,433 0,832 0,589 0, ,201 0,181 2,148 0,717 0, ,394 0,255-2,183 0,161 0, ,857 0,424 0,403 0,482 0,204

7 8*\FLHM]\NDSURJUDPRZDQLD,&/GRV]DFRZDQLDSDUDPHWUyZNU]\ZHM 503 :QLRVNLZ\QLNDMFH]]HVWDZLHQLDSDUDPHWUyZNODV\F]Q\FKRUD],57 :VSyáF]\QQLNDUy*QLFRZDQLH,VWQLHMH VáDED ]DOH*QRü SRPLG]\ NODV\F]Q PLDUUy*QLFRZDQLD D PLDU,57ZVSyáF]\QQLNNRUHODFML3HUVRQDPLG]\W\PLZLHONRFLDPLZ\QRVL 6WRZLHONRFLPLHU]FHLQQHZDUWRFL:WHRULLNODV\F]QHMNRUHODF\MQ\ZVSyá- F]\QQLNPRF\Uy*QLFuMFHMSU]HGVWDZLDVLá]ZL]NXZFDá\P]ELRU]HZ\QLNyZ a QDMZLNV]\ZSá\ZQDMHJRZLHONRüPDMZ\QLNLQDMZ\*V]HLQDMQL*V]HQDWo- PLDVW Z WHRULL SUREDELOLVW\F]QHM ZVSyáF]\QQLN D SRND]XMH QDFK\OHQLH NU]\ZHM w SXQNFLHQDMZLNV]HJR]Uy*QLFRZDQLDDZLFQDMZLNV]\ZSá\ZQDMHJRZLHl- NRüPDM]Z\NOHZ\QLNLURGNRZH :VSyáF]\QQLNEWUXdQRü,VWQLHMH FLVá\ ]ZL]HN SRPLG]\ NODV\F]Q PLDU WUXGQRFL DPLDU,57 (wspóáf]\qqlnnruhodfml3huvrqdplg]\w\plzlhonrfldplz\qrvl6wr ZLHONRFLPLHU]FHWHQVDPSDUDPHWUWHVWXGODWHRULLNOasycznej oraz IRT. :VSyáF]\QQLNFZVSyáF]\QQLN]JDG\ZDQLD UHGQLZVSyáF]\QQLN]JDG\ZDQLDZ\QRVL-HVWZLHONRFL]EOL*RQGR prawdosrgrelhvwzd]jdg\zdqldnwyudgodwhjrwhvwxz\qrvlsjg]lhs LORüPR*OLZ\FKRGSRZLHG]LQD]DGDQLH::S 0DNV\PDOQ\ZVSyáF]\QQLN zgadywania to 0,414, a minimalny 0,107.

Podobne dokumenty

KLASYCZNA I PROBABILISTYCZNA TEORIA TESTU ANALIZA PORÓWNAWCZA

BARBARA C,).2:,&= Instytut Pedagogiki, Akademia Bydgoska, Bydgoszcz KLASYCZNA I PROBABILISTYCZNA TEORIA TESTU ANALIZA PORÓWNAWCZA (J]DPLQ\]HZQWU]QHNWyUHRGNLONXODWVWDá\VLWUZDá\PHOHPHQWHPSRl- VNLHJRV\VWHPXNV]WDáFHQLDVSRZRGRZDá\]QDF]Q\Z]Uost