Curso de Elaboracion de Reactivos
Curso de Elaboracion de Reactivos
Curso de Elaboracion de Reactivos
Tipo PISA
Qu es evaluar?
Qu es medir?
MEDICIN
Es asignar un nmero que pretende medir el nivel o grado de aprovechamiento del alumno. Medir o cuantificar aciertos y errores son pasos previos a la verdadera evaluacin. Comprende: Porcentajes que se adjudicarn a cada aspecto, producto o actividad del curso. Criterios que se seguirn para adjudicar las calificaciones en cada uno de los rubros. Puede ser: Cuantitativa cantidad Cualitativa calidad
EVALUACIN
Implica: Descripciones cuantitativas y cualitativas de la conducta del alumno. La interpretacin de dichas descripciones. La formulacin de juicios de valor basados en la interpretacin de las descripciones.
Evaluar significa otorgar una apreciacin justa, tomando como base las manifestaciones externas que nos permiten elaborar un juicio justo.
Evaluacin
Evaluar
La evaluacin se define como la emisin de juicios de valor fundamentados que permiten la toma de decisiones. Es un proceso general que integra cuatro acciones esenciales y consecutivas: medicin, comparacin, emisin de juicios y toma de decisiones. La primera hace referencia al proceso sistemtico de obtencin de informacin; la segunda significa la contrastacin entre la informacin obtenida y los parmetros establecidos; en la tercera se emite el juicio de la vala o el mrito del objeto evaluado; por ltimo, la cuarta implica el establecimiento de las orientaciones o acciones a seguir.
Samperio, 1994. La evaluacin educativa. Reunin de Cocoyoc, Morelos.
Evaluar
Es un elemento esencial e implcito en todo proceso de enseanzaaprendizaje que conforma una triada inseparable, pues a la par de que se ensea se evala formativamente y la evaluacin en s misma es una oportunidad de aprender mediante la retroalimentacin y la prctica correctiva.
Daz Barriga A., F. (2006). Enseanza situada: Vnculo entre la escuela y la vida. Mxico: McGrawHill.
Tipos de evaluacin
Evaluacin Diagnstica
Evaluacin Sumativa
Evaluacin Formativa
Evaluacin Diagnstica
Muestra el punto de partida del proceso de cada estudiante, del grupo o del nivel educativo. A travs de diversas aproximaciones que recogen toda la informacin acumulada sobre los sujetos, ser posible determinar cmo se entra a un nuevo proceso. Conviene sistematizar las formas en que se recoge la informacin para no partir de una visin nebulosa del inicio de cualquier programa educativo.
Evaluacin Formativa
Denota el papel que el docente ejerce y el reconocimiento del proceso constructivo de los alumnos. Implica una evaluacin constante de los alumnos en funcin de los propsitos previos que nos hemos marcado en el curso y del desarrollo que la enseanza ha propiciado. Esta evaluacin obliga a pensar en herramientas para lograrla. Aqu conviene que se analice el papel de documentos de seguimiento y evaluacin y el que juega la historia escolar de los alumnos.
Evaluacin Sumativa
Consiste en medir los resultados de dicho aprendizaje para cerciorarse de que alcanzaron el nivel exigido. Es un instrumento de control del proceso educativo: el xito o fracaso en los resultados del aprendizaje de los alumnos es un indicador del xito o fracaso del propio proceso educativo para conseguir sus fines. La evaluacin sumativa, cuando tiene lugar al final de un ciclo o de un perodo de estudios, conduce a una acreditacin, certifica que los alumnos han realizado los aprendizajes correspondientes.
Evaluacin Sumativa
Es una prctica recomendable para saber si el nivel de aprendizaje alcanzado por los alumnos a propsito de unos determinados contenidos es suficiente para abordar con garantas de xito el aprendizaje de otros contenidos relacionados con los primeros.
Para qu evaluar?
Reorientar Progreso
Carcter
Indagador
Orientador
Valorativo
TCNICAS DE EVALUACIN:
Observacin Entrevista Encuesta Escala estimativa Informes Participacin en clase Contratos Maquetas Tareas Anlisis de trabajos Rbricas
*Orales
Exmenes
ELABORACIN DE REACTIVOS
Actividad. Verdades y mentiras sobre la evaluacin Debata con sus compaeros si est de acuerdo con los siguientes enunciados: 1) Un mejor sistema de exmenes, mejora el sistema de enseanza. 2) Segn el tipo de evaluacin que se realice, se tiene una cierta nocin de enseanza. 3) Un cinco en un examen dice con claridad lo que sabe el alumno. 4) El tipo de evaluacin que elija provoca en los alumnos un autntico inters por aprender.
Sugerencias generales
Lenguaje apropiado para la asignatura. Redaccin sencilla y correcta. Correspondencia entre artculos y sustantivos del enunciado y las opciones. Proporcionar nicamente la informacin necesaria. Manejar slo un resultado de aprendizaje. No evaluar el sentido comn del sustentante. Tomar en cuenta el nivel escolar de los examinados.
Sugerencias generales
Tomar como punto de partida la tabla de especificaciones. No aumentar la dificultad del reactivo utilizando tecnicismos o contenidos poco significativos. No se debern hacer reactivos con citas textuales del material didctico. Cada reactivo debe ser independiente uno de otro.
Base
Cada enunciado debe presentar nicamente un problema. Incluir los elementos estrictamente necesarios para comprender el sentido.
Opciones
Tener concordancia gramatical con la base. Ser homogneas gramaticalmente entre ellas.
Respuesta correcta
Slo una respuesta correcta. La respuesta debe resolver el problema satisfactoriamente. Se debe justificar el razonamiento de la respuesta correcta en trminos de qu tienen que saber y hacer para contestar correctamente.
Distractores
Incluir distractores plausibles. Utilizar enunciados verosmiles pero incorrectos. Incluir en los distractores los errores ms comunes de los estudiantes. Evitar que una opcin ayude a elegir la respuesta correcta por indicios gramaticales o por plausibilidad. Justificar el tipo de error que se comete para contestar.
En las pruebas objetivas, el trmino objetivas: DEFICIENTE A) se refiere al mtodo de calificar las respuestas. B) se refiere al mtodo de identificar los resultados de aprendizaje. C) se refiere al mtodo de presentar el problema. D) se refiere al mtodo de seleccionar el contenido del test.
En las pruebas objetivas, el trmino objetivas se refiere al mtodo de: A) calificar la respuesta. B) identificar los resultados de aprendizaje. C) presentar el problema. D) seleccionar el contenido del test.
MEJORADO
Base negativa
Cul de las siguientes no es una prctica deseable cuando se preparan temes de opcin mltiple? A) Acortar la base alargando las opciones. DEFICIENTE B) Subrayar ciertas palabras de la base para recalcarlas. C) Enunciar la base de manera afirmativa. D) Usar una base que pueda funcionar como tem de respuesta breve. Al elaborar reactivos de opcin mltiple todas las siguientes son prcticas deseables, EXCEPTO: MEJORADO A) acortar la base alargando las opciones. B) subrayar ciertas palabras de la base para recalcarlas. C) enunciar la base de manera afirmativa. D) usar una base que pueda funcionar como tem de respuesta breve.
La construccin negativa requiere ser utilizada en la base del reactivo, debidamente enfatizada. La palabra EXCEPTO posibilita menor desgaste cognitivo para el estudiante.
Cul de las siguientes publicaciones consultara en primer lugar para encontrar artculos de investigacin sobre pruebas de aprovechamiento? A) Revista de Investigacin Educativa. B) Suplemento de Medicin y Educacin.
A) claramente enunciados en trminos conductuales. B) elaborados por maestros y alumnos en colaboracin. C) preparados despus de que ha ocurrido la enseanza. D) enunciados en trminos generales.
La falta de atencin a los resultados de aprendizaje durante la Preparacin de un test: A) puede producir una prueba menos pertinente con el programa educativo. B) producir un mayor uso de las preguntas de ensayo. C) har ms difcil la elaboracin de los reactivos. D) disminuir la calidad tcnica de los reactivos.
La palabra puede es bastante obvia. Observe como las otras opciones inician de forma distinta. Esta clase de errores, tanto por extensin como el tiempo puede ser una clave para elegir la respuesta correcta.
Sinnimos
Cul de las siguientes caractersticas es la ms importante en los resultados de las pruebas de aprovechamiento?
Las palabras consistencia y confiabilidad pueden eliminarse, ya que ambas significan lo mismo.
Campo semntico
La obtencin de una jerarqua confiable del aprendizaje de los estudiantes es de primordial importancia cuando se usan: A) pruebas de aprovechamiento general. B) descripciones conductuales. C) listas de comprobacin. D) cuestionarios. DEFICIENTE
La obtencin de una jerarqua confiable del aprendizaje de los estudiantes es de primordial importancia cuando se usan pruebas de: A) aprovechamiento general. B) inteligencia. C) habilidad verbal. D) velocidad.
MEJORADO
Lista de verificacin
Estoy evaluando resultados de aprendizaje importantes y significativos?
Los contenidos que utilizo son pertinentes y relevantes al resultado de aprendizaje? La redaccin de los reactivos es clara? Se encuentra el problema esencial incluido en la base?
Lista de verificacin
Se elimin cualquier verborrea intil?
Se evit repetir en las opciones de respuesta palabras o frases claves incluidas en la base?
Se ordenaron las opciones en forma sistemtica? Son plausibles todos los distractores?
Lista de verificacin
Se distribuyeron al azar las respuestas correctas y con la misma frecuencia? Se evitaron todas las posibles pautas irrelevantes? (gramaticales, asociacin verbal directa, longitud de respuesta...) Existe solo una respuesta correcta? Se evit utilizar las opciones todas las anteriores, ninguna de las anteriores y no s?
Se evit utilizar oraciones negativas? Al utilizarlas fue la negacin subrayada o escrita en letras maysculas?
b)
c) d)
Diagnstico
Objetivo Estrategia
COMPLETAMIENTO
Enunciado con espacios en blanco que implica completar la expresin eligiendo la palabra o frase correcta.
Recomendaciones:
EJEMPLO COMPLETAMIENTO
El enfoque de sistemas aplicado a las organizaciones, considera a la organizacin como un sistema __________________ integrado por varios subsistemas.
a) b) psicosocial abierto sociotcnico abierto
c)
d)
sociotcnico estable
psicosocial cerrado
ORDENAMIENTO O JERARQUIZACIN
Consisten de una lista de elementos o datos, que tienen que ser ordenados de acuerdo con el criterio que se indica en las instrucciones (cronolgico, lgico, evolutivo, por rangos, etc.). Inician con una instruccin o pregunta y a continuacin aparecen las palabras o enunciados que forman parte de la base del reactivo precedidos por un nmero.
Recomendaciones:
1.- No emplear menos de 4 ni ms de 7 cuestiones para ordenar. 2.-No mezclar en una misma proposicin o enlistado elementos de distinta naturaleza ni distractores. 3.-Establecer con claridad el criterio para ordenar o jerarquizar el material. 4.-Manejar estos reactivos slo cuando se trate de explorar objetivos en los que la conducta correspondiente se refiera a discriminar posiciones, ordenar, jerarquizar, etc.
3. recepcin
4. valorizacin 5. caracterizacin por un valor A) 1, 4, 2, 5, 3 B) 2, 5, 3, 1, 4 C) 3, 1, 4, 2, 5 D) 4, 2, 5, 3, 1
Para este formato se presenta una pregunta o instruccin la cual es seguida de una serie de elementos que la responde, sin embargo no todos los elementos corresponden a la respuesta correcta, por lo que hay que seleccionar solamente aquellos correctos. Recomendaciones:
2.- Sirve para evaluar objetivos en donde se tengan que llevar a cabo actividades como: relacionar, vincular, clasificar, aplicar principios, inferir, etc. 3.- Construir grupos en que los elementos y relaciones sean, en cada uno, del mismo tipo y naturaleza. 4.- Se puede optar por poner el mismo nmero de opciones en ambas columnas, as como una de ellas puede contener un menor nmero de elementos donde se realicen categoras ms generales. En una de las columnas se recomienda poner nmeros y en la otra letras.
A)1d, 2b, 3a, 4c B)1c, 2a, 3b, 4d C)1b, 2c, 3d, 4a D)1a, 2c, 3a, 4c
SOLUCIN DE CASOS
En este caso, la pregunta describe una situacin especfica y da ciertos datos pertinentes en donde la tarea del sustentante es la de resolver el problema presentado.
Si usted es orientador educativo de un alumno universitario con bajo aprovechamiento escolar e ideas suicidas derivadas de un comportamiento inadecuado en el pasado, qu accin elegira para ayudarlo adecuadamente?
A) B) C) D) Identificar las causas del problema Referir el caso a un psiclogo Aplicarle exmenes para determinar las causas del bajo aprovechamiento Discutir sus creencias irracionales
MULTIRREACTIVO
Se presenta uno o varios prrafos donde se establece el problema o la situacin especfica y se elaboran de cinco a diez reactivos, en cualquier formato de opcin mltiple. La situacin puede plantear la descripcin de un experimento, de un problema clnico, social, educativo o industrial, un procedimiento de diagnstico, de intervencin, evaluacin, prevencin, etc. Su construccin debe cuidar que el grupo de reactivos incluidos sea consistente con la temtica especfica que se est evaluando y para la cual la informacin que se da en la descripcin de la situacin o problema a resolver es pertinente.
MULTIRREACTIVO
El evaluador encontrar que este formato de reactivos le permite:
a) Evaluar integralmente, en una sola presentacin global, una competencia en los niveles de operacin cognoscitivos requeridos b) Permite valorar, de manera ms precisa, la ejecucin del sustentante en procesos intelectuales complejos involucrados en la aplicacin contextualizada de los fundamentos tericos-mtodolgicos y tcnicos que sustentan un curso de accin o la solucin a situaciones y problemas especficos. c) Evaluar aprendizajes complejos sin tener que utilizar reactivos independientes. Se recomienda revisar los conjuntos de cada grupo de reactivos dependientes del contexto para cuidar que las preguntas se refieran directamente a la situacin planteada, as como para evitar que una pregunta d respuesta a otra (anterior o posterior).
EJEMPLO MULTIRREACTIVO
Inicia grupo de reactivos dependientes de contexto Instrucciones: Lea este caso y responda a los siguientes reactivos.
Situacin: En la actualidad, a pesar de los grandes avances
cientficos y tecnolgicos, el ser humano sigue enfrentndose a situaciones de desigualdad. En nuestro pas para el caso de los pueblos indgenas, estas condiciones se vinculan con factores ideolgicos, culturales y polticos que se expresan como racismo, marginacin, segregacin laboral e inequidad genrica. Interesados en conocer cmo estas caractersticas influyen en aspectos de la personalidad, se desarroll la investigacin denominada Autovaloracin y jerarqua de motivos en artesanos. El problema fue: Existen diferencias cualitativas en la jerarqua de motivos y la autovaloracin entre mujeres y varones artesanos otomes del Valle del Mezquital, Hidalgo?
MULTIRREACTIVO
Reactivo Asociado 1
El instrumento que se utiliz para recabar la informacin fue una gua de entrevista basada en la tcnica de historia oral, por lo que el anlisis de datos debi ser fundamentalmente: A) estadstico B) correlativo C) cualitativo
D) cuantitativo
MULTIRREACTIVO
Reactivo Asociado 2
MULTIRREACTIVO
Reactivo Asociado 3
Jerarqua de motivos y autovaloracin son las variables: A) independientes B) secundarias
C) relacionales
D) dependientes Termina grupo de reactivos dependientes de contexto
MULTIRREACTIVO
Ejemplo 2
Observe la siguiente grfica
300 250 200
150
100 50 0 1990 1992 1994 1996 1998 2000
MULTIRREACTIVO
El nombre de la grfica anterior es: A) dispersin. B) polgono. C) histograma. D) pastel.
Reactivo 1
Reactivo 3
Actividad
Elabore un reactivo de cada tipo a partir de una situacin:
Respuesta breve Completamiento Jerarquizacin Eleccin de elementos de un listado Relacin de columnas Solucin de casos
Los reactivos abiertos requieren ser codificados (asignacin de calificacin para su interpretacin cuantitativa).
Se asignan tres tipos de cdigos a las respuestas:
Crdito total: respuestas completamente correctas (puede ser 2 punto). Crdito parcial: no cumplen con todos los elementos para ser aceptables, pero tienen algunos (puede ser 1 punto). Sin crdito: respuestas no aceptables (0 puntos).
Ejemplo
Ejemplo
Ejemplo
C) El sistema de cognicin que procesa la informacin y D) El dominio de conocimiento que provee el contenido necesario.
Sistema de cognicin Los procesos mentales del sistema cognitivo toman accin desde el dominio del conocimiento. Utilizacin As se da acceso a la informacin para usar el conocimiento. Marzano divide el sistema cognitivo en cuatro procesos, cada uno de los cuales requiere del anterior. A). Conocimiento/recuerdo Aplicar el conocimiento en Anlisis B). Comprensin. situaciones especficas: C). Anlisis y Toma de decisiones: utilizar D). La utilizacin del conocimiento.
Utilizar lo que se ha aprendido para crear nuevos conocimientos y aplicarlos en situaciones nuevas Relacin: identificar similitudes y Identificar los detalles de la diferencias importantes entre informacin que son conocimientos. importantes. Clasificacin: identificar Recordar y ubicar la informacin categoras relacionadas al en la categora apropiada. conocimiento de sobre y subordinacin. Sntesis: identifica la mayora Generalizaciones: construir de los componentes de un nuevas generalizaciones o concepto y suspende los principios basados en el detalles insignificantes del conocimiento. mismo. Especificaciones: identificar Representacin: presentar la aplicaciones especficas o informacin en categoras para consecuencias lgicas del que sea ms fcil de conocimiento.
Sistema de metacognicin
Comprensin
Conocimiento Recuerdo
Recuerdo de la informacin exactamente como fue almacenada en la memoria permanente. Nombrar: identificar o reconocer la informacin pero no necesariamente se comprende su estructura. Ejecutar: realizar un procedimiento, pero no necesariamente se comprende cmo se produjo.
encontrarla y utilizarla.
Controla los procesos de pensamiento y regula los otros sistemas. Se establece metas y toma decisiones acerca de qu informacin es necesaria y qu proceso cognitivo ser el mejor para alcanzar determinado objetivo. Especificacin de metas: el el conocimiento para decidir aprendiente puede establecer acerca del uso del un plan de metas conocimiento. relacionadas con el conocimiento. Solucin de problemas: Monitoreo de procesos: el utilizar el conocimiento para aprendiente puede prevenir y/o solucionar monitorear la ejecucin del problemas relacionados con conocimiento. el conocimiento. Monitoreo de la claridad: Investigacin experimental: el aprendiente puede utilizar el conocimiento para determinar hasta que punto generar y evaluar hiptesis posee claridad en el sobre el conocimiento. conocimiento. Monitoreo de precisin: el Investigacin: utilizar el aprendiente puede conocimiento para conducir determinar hasta que punto investigaciones del es preciso en el conocimiento conocimiento.
Dominios de conocimiento Informacin: La organizacin de ideas, tales como principios, generalizaciones y detalles (como trminos y hechos). Los principios y generalizaciones s permiten almacenar ms informacin con menos esfuerzo categorizando los conceptos. Procesos mentales: Se pueden alinear procesos complejos, como la escritura, y procesos ms simples que encierran una serie de actividades que no es ne especfica de pasos. Procesos fsicos: Estos dependen del rea de aprendizaje y de lo complejo de la actividad. Se presentan en actividades como las que se dan en el proceso ocular de izquierda a derecha) a las que se presentan en movimientos para realizar ejercicios fsicos que requieren de fuerza y equilibrio.
Diagnstica
Adquisicin
Clasific. Y Jerarq.
Aplicacin
Metacog.
Integradora
actividad
actividad
actividad
actividad
actividad
actividad
Elaboracin del instrumento de evaluacin acorde a la fundamentacin metodolgica de los programas y guas.
20 reactivos de Contenido (40%) 15 reactivos de Organizacin y Jerarquizacin (30%) 10 reactivos de Aplicacin (20%) 5 reactivos de Metacognicin (10%)
En un examen de 50 preguntas