HOGAN: CAPITULO 6: ELABORACION DE PRUEBAS Y ANALISIS ANALISIS DE REACTIVOS 6 etapas principales, las cuales no siempre están del todo diferenciadas en la práctica, puede haber cierto traslape y reciclaje entre ellas. ?. E1#$#R L! 1#$!L#! E L! PR%E"! 2. !SPEC&OS DE DISEÑO PRELIMINARES 3. PREPARACION DE REACTIVOS
4. !$!L#S#S DE REACTIVO RE ACTIVOS S 5. PROGRAMAS DE ESTANDARIZACION E INVESTIFACION SECUNDARIOS 6. PREP!R!C#O$ DE LOS MATERIALES FINALES Y PUBLICACION
EL PROCESO E EL!"OR!C#O$ E PRE%"!S E%C!&#'!S E%C!&#'!S ( PS#COLO)#C!S CO*#E$+! POR LO CO*%$ CO$ %$ PL!$&E!*#E$&O P L!$&E!*#E$&O SO"RE EL O LOS PROPOS#&OS E L! PR%E"! ( EL CO$S&R%C&O O *"#&O E CO$&E$#O -%E !"R E *E#RSE.
1) DEFINICIÓN DE LA FINALIDAD DE LA PRUEBA La elaboraci/n de una prueba comien0a con un PL!$&E!*#E$&O E L! 1#$!L#! del instrumento, 2ue consiste en delinear el o los ras3o4s 2ue se medirá4n y la audiencia meta de la prueba. El planteamiento debe formularse atendiendo a la clase de interpretaci/n 2ue se pretende dar en 5ltima instancia a la o las puntuaciones de la prueba. %no $O debe proceder de inmediato a elaborar el instrumento, la etapa si3uiente debe ser determinar si ya eiste una prueba apropiada, ya 2ue elaborar una prueba nue7a es una labor prolon3ada, dif8cil y costosa. Es necesario tomarse tiempo para determinar si una prueba eistente ser7irá para la finalidad 2ue se ten3a en mente, antes de tratar de elaborar una nue7a.
2) ASPECTOS DE DISEÑO PRELIMINARES El autor debe tomar 7arias decisiones sobre e l dise9o del instrumento, las cuales se basan en la finalidad de la prueba y en las interpretaciones 2ue se busca da r a las puntuaciones. Se deben abordar los si3uientes !SPEC&OS E #SE:O; !. *OO E !PL#C!C#<$; !PL#C!C#<$; =la prueba se aplicará en forma indi7idual o 3rupal> La aplicaci/n colecti7a será más efica0, pero la indi7idual permitirá una mayor adaptabilidad en los formatos de los reacti7os y la obser7aci/n cl8nica del eaminado.
". %R!C#O$; =!pro cuanto durara la prueba> =Será bre7e, con 2ue periodo de aplicaci/n, prolon3ada> %na prueba bre7e es más efica0, pero tendrá una confiabilidad más limitada y una sola puntuaci/n. Este punto se relaciona con la cuesti/n de 2ue tan sensible será la prueba. C. 1OR*!&O E LOS RE!C&#'OS; =-u@ formato se utili0ara para los reacti7os; opci/n m5ltiple, 7erdadero o falso, acuerdo o desacuerdo, construcci/n de rtas> %n formato de construcci/n de rta permite una rta más rica y una mayor fleibilidad, pero será más dif8cil de calificar. . C!$&#! E P%$&%!C#O$ES; =Cuántas puntuaciones 3enerará la prueba> Se relaciona con la duraci/n de la prueba. A Puntuaciones interpretaciones adicionales pero tambi@n ei3en mas reacti7os A tiempo de prueba. E. #$1OR*ES E L!S P%$&%!C#O$ES; =-u@ clase de reportes de las puntuaciones se producirán> =abrá un re3istro simple, escrito a mano, de la puntuaci/n o un conjunto elaborado de informes 3enerados por compus> =-ue se informara con eactitud; solo una puntuaci/n total de la prueba o tambi@n el desempe9o en conjuntos de reacti7os> 1. C!P!C#&!C#O$ EL !PL#C!OR; =Cuánta capacitaci/n se necesitara para la aplicaci/n y calificaci/n de la prueba> =-ui@nes implementen la prueba re2uieren un adiestramiento profesional ehausti7o para aplicar, calificar e interpretar el instrumento> Si se precisa entrenamiento ehausti7o Bcomo se proporcionara> ). #$'ES&#)!C#O$ E !$&ECEE$&ES; una in7esti3aci/n de antecedentes sobre el ámbito 2ue se probará una b5s2ueda de biblio3raf8a estándar. Las consideraciones de dise9o determinan 2ue clase y 2u@ cantidad de reacti7os se redactaran. Las malas decisiones concernientes al proceso de dise9o ori3inal de la prueba no pueden remediarse en las etapas de redacci/n o análisis de los reacti7os del desarrollo de la prueba.
Orig! " #$% &r'($% !'$% D 1%E$&ES PP!LES-%E *O&#'!$ L! EL!"OR!C#O$ E PRE%"!S $%E'!S; ? $ecesidad Práctica F $ecesidad te/rica D re7isar o adaptar las pruebas eistentes conser7ar lo más posible la estructura fundamental del instrumento, pero 2ue lo modifican para poblaciones especiales; tal modificaciones suele entra9ar mucho más 2ue una simple traducci/n de lo s reacti7os e instrucciones de la prueba.
*+ PREPARACION DE REACTIVOS #ncluye tanto la redacci/n de estos como su re7isi/n. Esta redacci/n esta definida por la finalidad de la prueba y las consideraciones de dise9o preliminares. %n RE!C&#'O de una prueba posee cuatro partes; ? el ES&G*%LO al 2ue responde el eaminado denominado a menudo L! "!SE EL RE!C&#'O, puede ser una pre3unta, una ima3en acompa9ada por una pre3unta oral, puede ser un aparato, etc. F el 1OR*!&O Ho m@todo de respuesta incluye factores, respecto de si @ste es un reacti7o de opci/n m5ltiple o deconstrucci/n de pruebas. D las CO$#C#O$ES -%E R#)E$ L! RESP%ES&! se hallan 7ariables como el l8mite de tiempo para responder o si 2uien ap lica la prueba puede sondear las rtas ambi3uas y como se re3istra eactamente la rta. I el PROCE#*#E$&O P!R! C!L#1#C!R EL RE!C&#'O.
TIPOS DE REACTIVOS DE LAS PRUEBAS Se clasifican en t@rminos del formato de rta a los reacti7os. ay OS tipos; ? RE!C&#'OS E SELECC#<$ E R&! SE LE PRESE$&! !L EJ!*#$!O !L *E$OS OS, PERO $O *!S E %$! R!+O$!"LE ( PE-%E:! C!$&#! E OPC#O$ES, E L!S C%!LES &#E$E -%E ELE)#R %$! R&!. Se denominan reacti7os de RESP%ES&! *%L&#PLE, OPC#O$ *%L&#PLE o de ELECC#<$ 1OR+!!. Es el más popular. Por ejemplo, se utili0a una estructura de opci/n m5ltiple de I o K opciones, o la ESC!L! L#ER& Hcinco puntos 2ue 7an de Mcompletamente de acuerdoN a Mcompletamente en desacuerdoN en cada respuesta. Se califican como CORREC&OS O #$CORREC&OS se concede un punto o cero a una rta correcta o incorrecta respecti7amente lue3o, se califica la prueba contabili0ando la cantidad total de aciertos. Otra forma de calificar consiste en conceder un cr@dito parcial por ele3ir una opci/n 2ue no es la mejor respuesta posible, pero 2ue no está del todo e2ui7ocada. Otra 7ariante supone otor3ar una ponderaci/n adicional a los reacti7os 2ue son muy importantes. Los sistemas de clasificaci/n más complicados suelen 3enerar solo puntuaciones más confiables y mas 7alidas, pero hay 2uienes afirman 2ue no 7ale la pena molestarse en utili0ar sistemas complicados. Las consideraciones de dise9o preliminares a la elaboraci/n de la prueba determinan en parte el m@todo de calificaci/n de estos reacti7os. F RE!C&#'OS E CO$S&R%CC#O$ E RESP%ES&! SE PRESE$&! %$ ES&#*%LO, PERO $O SE RES&R#$)E !L EJ!*#$!O ! ELE)#R %$ CO$%$&O 1#O E R&!S L E"E CRE!R O CO$S&R%#R L! R&!. Es una RESP%ES&! L#"RE en el sentido de 2ue no está limitado a una serie fija de opciones, hay condiciones 2ue ri3en la rta. %na 7ersi/n es el formato de LLE$!R EL ESPEC#O E$ "L!$CO, donde se omite una palabra o frase cla7e de un enunciado para 2ue el eaminado colo2ue las palabras faltantes. Otra es la PR%E"! E E$S!(O, en la cual el reacti7o de la prueba se presenta una situaci/n o tema, y el eaminado escribe una respuesta 2ue puede ir d e unos cuantos enunciados a 7arias pá3inas de teto. Se utili0a mucho en pruebas de personalidad. La calificaci/n plantea desaf8os especiales, debido a 2ue las rtas pueden ser muy di7ersas. ay OS factores cla7e para crear puntuaciones 5tiles a lo s reacti7os de construcci/n de respuesta; el primero consiste en ase3urar la confiabilidad entre calificadores Hes crucial el SE)%$O es concebir un ES-%E*! E CL!S#1#C!C#O$, 2ue 7ar8an mucho dependiendo el tipo de prueba HJE para calificar los ensayos hay I m@todos; el OL#S&#CO, el !$!L#&#CO, el R!S)O PR#*!R#O y el S#S&E*! E P%$&OS.
,VENTA-AS Y DESVENTA-AS DE LOS REACTIVOS DE SELECCIÓN Y DE CONSTRUCCION DE RTA. !un2ue en muchas e7aluaciones de aplicaci/n indi7idual se emplea el formato de construcci/n de respuesta, tambi@n es posible utili0ar este formato en las p ruebas de aplicaci/n de 3rupos, y 7ice7ersa con el de selecci/n de reacti7os es decir cual2uier prueba 2ue se apli2ue a un 3rupo tambi@n puede hacerse en forma indi7idual. Los RE!C&#'OS E SELECC#<$ E R&! POSEE$ D PR#$C#P!LES 'E$&!!S; a dado 2ue la calificaci/n ei3e poco o nin35n juicio, la confiabilidad entre los calificadores o entre jueces es en esencia perfecta Hen cambio en la de CO$S&R%CC#O$ E R&! es un problema sustancial. El reacti7o de opci/n m5ltiple se con7irti/ en el formato preferido. (a 2ue 3enera puntuaciones más confiables 2ue los otros.
b su E1#C!C#! &E*POR!L el eaminado por lo )ral. responde a mas reacti7os de selecci/n de rta 2ue de construcci/n de rta. c la E1#C!C#! E L! C!L#1#C!C#<$, ya 2ue un empleado o escáner electr/nico pueden calificar estos reacti7os de manera 7elo0. Los reacti7os de CO$S&R%CC#O$ E R&! poseen tambi@n D 7entajas; a permiten una O"SER'!C#O$ *!S SE$C#LL! EL CO*POR&!*#E$&O ( LOS PROCESOS al reali0ar la prueba facilita obser7ar en el eaminado su moti7aci/n, ansiedad, forma de abordar los problemas y otros, en formas 2ue los reacti7os de selecci/n de rta no lo permitir8an. b PER*#&E EJPLOR!R RE!S #$%S%!LES 2ue probablemente tal 7e0 nunca aflorar8an con uno de selecci/n de rta. c influye en los !"#&OS E ES&%#O E LOS ES&%#!$&ES, ya 2ue promue7en una aproimaci/n mas holista y si3nificati7a al estudio Hen cambio los otros más memori0aci/n y aproimaci/n atomista al aprendi0aje de las materias.
CONSIDERACIONES PR/CTICAS PARA REDACTAR LOS REACTIVOS =Cuántos deben redactarse> $o hay una rta definiti7a a esta pre3unta, pues depende en parte de 2ue se tomen las decisiones adecuadas en la etapa de dise9o preliminar. %na re3la práctica consiste en preparar entre F y D 7eces más reacti7os de los necesarios para la prueba final. !s8 2ue, si la prueba final contará con KQ reacti7os, uno deber8a preparar entre ?QQ y ?KQ para probarlos. Si la prueba final tendrá KQ reacti7os y s/lo se someten a prueba KK, es casi se3uro 2ue el análisis de los reacti7os re7ele más de K reacti7os con caracter8sticas indeseables. EDICION Y REVISION DE REACTIVOS %na 7e0 2ue se han redactado los reacti7os, se someten a una re7isi/n desde 7arias perspecti7as. Primero se re7isan en funci/n de su claridad, correcci/n 3ramatical y conformidad con las re3las para la redacci/n de reacti7os. En se3undo lu3ar, en el caso de los reacti7os de las pruebas de apro7echamiento, se hace una re7isi/n de la correcci/n del contenido. En tercer lu3ar, se busca posibles ses3os de 3@nero, raciales o @tnicos; la cuesti/n es si al3o en el reacti7o perjudica o es injusto con al35n miembro del 3rupo, 2ui0ás estos respondan de manera inadecuada. Si se sospecha 2ue un reacti7o afecta de manera no e2uitati7a el desempe9o en la prueba, la tendencia com5n es eliminarlo de la reser7a. 0+ AN/LISIS DE REACTIVOS Esta es una etapa crucial. Conlle7a El análisis de los datos obtenidos al someter a prueba los reacti7os. Los reacti7os se eli3en para su inclusi/n en la prueba final con base en este análisis, el cual consiste en D procesos; a Prueba de los Reacti7os b análisis estad8stico y c selecci/n de reacti7os. Los reacti7os de las pruebas son como l os blo2ues de una construcci/n, los especialistas controlan las caracts de una prueba al controlar los reacti7os 2ue la conforman. Si se desea una prueba sencilla, se recurre a reacti7os fáciles y si se 2uie re una 2ue ten3a una confiabilidad de consistencia interna ele7ada, se emplean reacti7os 2ue est@n muy correlacionados. El análisis te reacti7os es el conjunto de procedimientos 2ue permiten ejercer ese control. a Prueba de Reacti7os hay dos etapas; una formal y otra informal. Los datos del análisis de reacti7os se basan en la prueba formal. Sin embar3o, antes de reali0ar esta, se acostumbra y es sensato lle7ar a cabo una prueba informal esto suele hacerse con tan solo unos cuantos casos, entre K y ?Q indi7iduos similares a a2uellos a los 2ue se pretende administrar la prueba. ! los indi7iduos 2ue reali0an la prueba #$1OR*!L, se les pide 2ue comenten los reacti7os y las
instrucciones del instrumento 2ui0á se les propon3a 2ue p iensen en 7o0 alta al responder, ya 2ue esto contribuye a 2ue el creador de la prueba identifi2ue formulaciones ambi3uas, interpretaciones inesperadas de un reacti7o, confusi/n sobre los m@todos de rta y otras anomal8as similares. La prueba 1OR*!L de reacti7os supone aplicar los nue7os reacti7os de la prueba a muestras de eaminados. Las muestras deben ser representati7as de la poblaci/n meta del instrumento. Las muestras deben ser lo suficientemente 3randes como para 3enerar datos estables. ay D prácticas comunes para la 1OR*!L; Procedimientos de ES&%#O #$EPE$#E$&E; consiste en reali0ar un estudio con la finalidad eclusi7a de hacer un análisis de reacti7os. Las muestras de eaminados tienen 2ue estar bajo las condiciones buscadas pa ra la prueba final tal 7e0 no haya l8mite de tiempo para ase3urar 2ue los eaminados puedan probar todos los reacti7os. El procedimiento de !COPL!*#E$&O; consiste en incluir reacti7os de prueba en la aplicaci/n re3ular de una prueba eistente. El procedimiento de !$!L#S#S CO$&#$%O ei3e 2ue se utilice en f orma reiterada una prueba o reser7a de reacti7os, a la cual se suman nue7os reacti7os en cada uso. Los nue7os reacti7os están sujetos a un análisis de reacti7os, con base en el cual se retienen, modifican o descartan y pueden o no contar en la puntuaci/n de la prueba. Se recurre a este procedimiento a fin de contar con informaci/n sobre la calidad de sus reacti7os sin tener 2ue utili0ar eactamente la misma prueba una y otra 7e0. " ES &!#S&#COS E LOS RE!C&#'OS. ificultad de los reacti7os; alude al porcentaje de eaminados 2ue responden de manera correcta en a2uellos calificados como McorrectosN o MincorrectosN o responden en cierta direcci/n en a2uellos 2ue no tienen una rta McorrectaN. Los ni7eles de dificultad del reacti7o se denominan '!LORES MpN donde MpN si3nifica porcentaje o proporci/n, de modo 2ue un reacti7o con 7alor MpN de Q.K es sencillo, ya 2ue KT de los eaminados lo respondieron correctamente. iscriminaci/n del reacti7o; alude a la capacidad de un reacti7o para diferenciar en t@rminos estad8sticos en una forma deseada entre los 3rupos de eaminados. $o se refiere a una discriminaci/n se3re3aci/n sociol/3ica o jur8dica basada en ra0ones de ra0a, 3enero, reli3i/n, etc. Se pretende 2ue el reacti7o diferencie entre los indi7iduos 2ue tienen más del ras3o 2ue se trata medir de 2uienes poseen menos de ese ras3o. !2uellos 2ue lo3ran hacer esta diferencia, constituirán una buena prueba. Para determinar si un reacti7o diferencia entre 2uienes tienen más o menos del ras3o 2ue se 2uiere medir, es preciso identificar a los 3rupos 2ue poseen más o menos del mismo. ay dos m@todos para esta identificaci/n; el *E&OO EJ&ER$O donde la base para la identificaci/n de los 3rupos es eterna a la prueba y depende de 2ue el in7esti3ador cuente con dos o más 3rupos diferenciados en el ras3o en cuesti/n, se35n cierto criterio eterno y el *E&OO #$&ER$O usado para crear 3rupos 2ue tienen más o menos del ras3o 2ue se intenta medir, se califica toda la prueba, lue3o se identifica 2uienes recibieron una puntuaci/n ele7ada en la prueba y a a2uellos 2ue tienen puntuaci/n baja lue3o se determina hasta 2ue punto un determinado reacti7o diferencia entre los 2ue obtu7ieron calificaciones ele7adas y 2uienes puntuaron bajo puede hacerse una de 7arias posibles di7isiones entre 2uienes obtienen puntuaciones ele7adas y 2uienes las reciben bajas, se empie0a con la distribuci/n de las puntuaciones totales en la prueba y lue3o es posible definir a los 3rupos MaltoN y MbajoN como las mitades superior e inferior de l a distribuci/n. - !nálisis de los #S&R!C&ORES; los datos del análisis tambi@n nose emplean para lo 2ue se conoce como análisis de #S&R!C&ORES. %n #S&R!C&OR es una opci/n incorrecta o no preferida en un reacti7o. %n análi sis de reacti7os suele ofrecer informaci/n no solo sobre el desempe9o en la opci/n correcta o preferida, sino tambi@n en cada una de las
-
-
-
otras opciones del reacti7o. El análisis d e distractores puede 3enerar informaci/n 5til sobre la comprensi/n o malentendido en relaci/n con un reacti7o. !$!L#S#S 1!C&OR#!L como &@cnica de !nálisis de Reacti7os; el análisis factorial tambi@n se emplea en la fase de análisis de reacti7os dentro de la elaboraci/n de pruebas para ayudar a ele3ir los reacti7os 2ue 3eneraran relati7as p untuaciones independientes y si3nificati7as. En esta aplicaci/n del análisis factorial se utili0a una 3ran cantidad de reacti7os 2ue parecen pertinentes en relaci/n con los ras3os 2ue se pretende medir a una muestra de eaminados. Las correlaciones internas entre ellos se estudian mediante análisis factorial, se identifican las dimensiones Hfactores subyacentes lue3o, se eli3en los reacti7os 2ue tienen car3as fuertes en los factores, para su inclusi/n en la prueba final, la cual 3enera puntuaciones separadas de cada uno de los factores con reacti7os, 2ue deben ser indicadores relati7amente putos y eficaces de los factores. 1%$C#O$!*#E$&O #1ERE$C#!L EL RE!C&#'O H1R; aborda la interro3ante de si los reacti7os de una prueba funcionan en forma diferente en distintos 3rupos de eaminados por otras ra0ones aparte de las diferencias reales en el ras3o 2ue se mide. La interro3ante fundamental puede abordarse para cual2uier 3rupo de comparaciones. Se dice 2ue el funcionamiento diferencial del reacti7o se da cuando 2uienes se someten a la pruebas tienen aproimadamente i3ual capacidad en el constructo meta ámbito de contenido y difieren en sus rtas a un reacti7o en funci/n de su pertenencia a un 3rupo. El análisis 1R de diferencias raciales, @tnicas y de 3@nero suele reali0arse en la etapa de análisis de reacti7os al elaborar la prueba, pero tambi@n puede lle7arse a cabo despu@s de haberse publicado el instrumento. !L!#S#S E RE!C&#'OS P!R! PR%E"!S CO$ RE1ERE$C#! !L CR#&ER#O; en los procedimientos de análisis de reacti7os, se da por sentado 2ue la finalidad de la prueba consiste en medir las #1ERE$C#!S E$&RE L!S PERSO$!S. Los procedimientos ayudan a identificar los reacti7os 2ue contribuyen a e sta diferenciaci/n, a2uellos reacti7os 2ue no cumplen con esta funci/n no sir7en. Las pruebas de referencia al CR#&ER#O buscar determinar si SE ! C%*PL#O CO$ %$ E&ER*#$!O CR#&ER#O, y resulta irrele7ante si la prueba diferencia entre las personas. $o obstante, el análisis de reacti7os puede ser de utilidad para pruebas con referencia al criterio en dos circunstancias; a si la prueba mide los efectos de la capacitaci/n o al35n otro tratamiento, en el análisis p uede utili0arse el modelo del criterio eterno ya descrito, donde el criterio eterno es la eposici/n en comparaci/n con la no e posici/n a la capacitaci/n o el tratamiento y b incluso ante la ausencia de un criterio eterno pertinente, el criterio interno de la di7isi/n de la puntuaci/n total en la prueba puede ser de pro7echo. Es inusual hallar una aplicaci/n en al cual todos los eaminados alcancen puntuaciones perfectas o de cero en una prueba, ya 2ue siempre hay cierta diferenciaci/n. Cuando hay diferencia en las puntuaciones los procedimientos de análisis de reacti7os 3eneran informaci/n 5til sobre el reacti7o.
C SELECC#<$ E RE!C&#'OS Es la fase final del proceso de análisis de reacti7os es la SELECC#<$ de @stos. e todos los reacti7os preparados y e7aluados, se selecciona los 2ue aparecerán en la prueba 2ue se estandari0ara. En la selecci/n se considera la finalidad y el dise9o ori3inal de la prueba, las especificaciones de contenido pertinentes y los datos de análisis de reacti7os. E$&O$CES '!R#!S #REC&R#CES EL PROCESO E SELECC#<$ E RE!C&#'OS La cantidad total de reacti7os en la p rueba suele ser el determinante mas importante de su CO$1#!"##!. Prueba corta no es muy confiable. ! re3la 3ral, para aumentar la •
•
•
•
•
confiabilidad de una prueba se debe incrementar la cantidad de reacti7os. $o obstante, hay un punto de rendimiento decreciente. La consideraci/n sobre la cantidad deseada de reacti7os debe enfocarse en las puntuaciones 2ue se informaran, no solo en la cantidad total de reacti7os de la prueba. El 3rado de dificultad promedio de una prueba está en funci/n directa de sus 7alores MpN. la puntuaciones promedio en la prueba es la suma de los 7alores MpN, es decir 2ue la puntuaci/n media en la prueba es el 7alor MpN promedio multiplicado por la cantidad de reacti7os del instrumento. El 7alor MpN es en realidad un 8ndice de 1!C#L#! y no de dificultad del reacti7o. Se re2uieren 7alores MpN ele7ados. -%E L! PR%E"! SE! 1!C#L O #1#C#L ES !L)O -%E EPE$E E L! 1#$!L#! EL #$S&R%*E$&O. En 3eneral, se pretende 2ue los reacti7os ten3an 8ndices d e discriminaci/n ele7ados. Si bien se suele considerar 2ue una correlaci/n Mele7adaN s de Q.Q o superior, los 8ndices de discriminaci/n adecuados no tienen 2ue ser mayores a Q.KQ y un 8ndice de Q.DQ es muy respetable. %n conjunto de reacti7os cuyos 8ndices de discriminaci/n sean de Q.DQ a Q.KQ conformaran una muy buena prueba. Cuando se recurre al análisis factorial como t@cnica de análisis de reacti7os, la meta con frecuencia consiste en obtener 7arias pruebas correspondientes a los factores, 2ue constituyan indicadores relati7amente MpurosN de los factores. Por tanto, se seleccionan reacti7os 2ue ten3an car3as fuertes en un solo factor y car3as más o menos bajas en todos los demás factores. ay una relaci/n importante entre el 7alor MpN de un reacti7o y el #$#CE E *J#*! #SCR#*#$!C#O$ POS#"LE H en concreto, puede ad2uirir su 7alor máimo cuando MpN se encuentra en su punto intermedio. Los criterios estad8sticos deben moderarse con consideraciones no estad8sticas en la selecci/n de los reacti7os. Ciertos reacti7os pueden incluirse en una prueba de apro7echamiento para satisfacer las ei3encias de las especificaciones de contenido del instrumento, es decir, para 3aranti0ar la 7alide0 de contenido.
RE&O*!R L! 1!SE E PREP!R!C#O$ E LOS RE!C&#'OS al completar el proceso de análisis, es posible 2ue el autor de la prueba decida preparar mas reacti7os, 2uiU0a una cantidad insuficiente de reacti7os de 3ran calidad sobre7i7a al proceso de análisis o tal 7e0 este arroje luces 2ue se9alen rumbos nue7os para la elaboraci/n de reacti7os. -ui0á esta nue7a informaci/n influya en el dise9o 3eneral del instrumento.
) PROGRAMAS DE ESTANDARIACION Y DE INVESTIGACION AU3ILIARES El pro3rama de estandari0aci/n 3enera las normas de la prueba. Se trata de un importante aspecto de la dili3encia 2ue se emprende al elaborar una prueba y 2ue inicia despu@s de haber seleccionado los reacti7os en la fase final de la etapa de análisis de estos. La prueba 2ue se estandari0a debe ser la misma 2ue habrá de publicarse al final. abrá otros pro3ramas de in7esti3aci/n 2ue se ejecuten con la 7ersi/n final de la prueba, pero antes de su publicaci/n. La 8ndole y etensi/n de estos pro3ramas auiliares dependen del alcance del instrumento Pueden lle7arse a cabo 7arios tipos de estudios como por ej. el &ES&RE&ES sobre confiabilidad, ente otros ay D tipos de POR)R!*!S E E-%#'!L$EC#! 2ue podr8an reali0arse como parte o al mismo tiempo 2ue el pro3rama de estandari0aci/n; PR#*ERO, si la prueba tienen formas alternas, para 2ue las normas se apli2uen a todas las formas, estas deben corresponderse. SE)%$O, si el instrumento posee más de un ni7el, entonces es menester hacer 2ue se correspondan los
diferentes ni7eles. &ERCERO, si la prueba reci@n estandari0ada es una re7isi/n de un instrumento estandari0ado de manera pre7ia, tal 7e0 con7en3a ofrecer cuadros en los 2ue se ha3a corresponder las normas de las ediciones anterior y nue7a.
6) PREPARACION DE LOS MATERIALES FINALES Y PUBLICACION la etapa MfinalN del proceso de elaboraci/n de la prueba es su publicaci/n. &iene 2ue 7er tambi@n con las instrucciones de aplicaci/n e interpretaci/n, los manuales t@cnicos, los reportes de puntuaciones y otros materiales complementarios. %na prueba publicada cuenta con un *!$%!L &EC$#CO 2ue es la fuente de informaci/n fundamental sobre la finalidad, los fundamentos y la estructura de la prueba, mismo 2ue debe contener informaci/n acerca de la confiablidad, 7alide0 y procedimiento de normali0aci/n del instrumento tambi@n con las directrices de interpretaci/n de las puntuaciones de la prueba. *uchas pruebas posen elaborados #$1OR*ES E P%$&%!C#O$ES 2ue 2ui0á incluyan una presentaci/n 3rafica de las puntuaciones num@ricas a al3una forma narrati7a o una de ellas. La publicaci/n puede abarcar di7ersos *!&ER#!LES S%PLE*E$&!R#OS. El proceso nunca está completo i3ualmente. !l momento de su publicaci/n, no hay prueba para la 2ue se haya hecho una demostraci/n ehausti7a de su 7alide0 además, siempre sur3en interro3antes sobre su aplicaci/n a di7ersas poblaciones especiale s. %na prueba publicada esta sujeta S#E*PRE ! #$'ES&#)!C#O$ES !#C#O$!LES, #$CL%SO ESP%ES E S% P%"L#C!C#O$. Las pruebas y documentos 2ue las sustentan se re7isan en forma PER#O#C! para determinar si se necesitan re7isiones. Las re7isiones o correcciones son $ECES!R#!S cuando nue7os datos de in7esti3aci/n, cambios si3nificati7os en el campo o nue7as condiciones de uso e interpretaci/n de la prueba pudieran mejorar la 7alide0 de las puntuaciones del instrumento o indicar 2ue este ya no es adecuado para el uso deseado.
14 COSAS PRINCIPALES SOBRE LA ELABORACION DE PRUEBAS ?. La concepci/n ori3inal es más importante 2ue la labor t@cnica o estad8stica Hsi carece de un concepto claro desde sus or83enes, no habrá refinamiento en la redacci/n de los reacti7os o eperiencia en estad8stica 2ue sal7e el proyecto F. Se re2uiere dedicar mucho tiempo a estudiar el área 2ue se desea e7aluar, antes de empe0ar a redactar reacti7os. D. En la etapa de #SE:O OR#)#$!L, es necesario pensar en los informes de las puntuaciones finales. I. !l preparar los reacti7os, bus2ue la sencille0, los reacti7os Min3eniososN con frecuencia no funcionan K. !se35rese de probar los reacti7os suficientes; en 3eneral, se re2uiere el doble de la cantidad necesaria para la prueba final. 6. !ntes de la e7aluaci/n principal se reali0ara una e7aluaci/n informal simple V. Los reacti7os MmalosN casi siempre son fáciles de identificar. Los diferentes tipos de estad8sticos de los análisis de reacti7os no marcan 3ran diferencia. . esde un punto de 7ista estad8stico, el 3rupo de estandari0aci/n no tiene 2ue ser muy 3rande, si se eli3e de manera apropiada. $o obstante, a muchos les impresiona el tama9o del 3rupo U. Por fa7or, es 7ital 2ue se publi2ue tambi@n el *!$%!L 1#$!L ?Q. &odo el proceso siempre se lle7a más tiempo del 2ue se calcula.
