Evaluación Veracruz, Ver., febrero 2009 Índice



Descargar 24,8 Kb.
Fecha de conversión27.02.2017
Tamaño24,8 Kb.

Evaluación

  • Veracruz, Ver., febrero 2009

Índice

  • Evaluación tradicional
  • Evaluación estandarizada
  • Preguntas cerradas y abiertas
  • Rúbricas
  • Bibliografía

Evaluación tradicional: sus inconvenientes

  • Cada profesor califica con su propio criterio
  • Dificultad vs. Habilidad

Evaluación subjetiva: más inconvenientes

Evaluación objetiva: un intento

  • Calificación por curva
  • ¿Qué significa obtener promedio de 8?
  • 6 7 8 9 10 10 10

Evaluación ideal

  • El modelo de evidencias vincula los datos de la tarea con las variables planteadas en el Perfil.
  • Identifica y caracteriza las principales características del producto de la acción y las transforma en evidencias observables y cuantificables.

Pruebas estandarizadas

  • Son exámenes objetivos para medir el aprendizaje
  • Aprendizaje es cambio en comportamiento mental: duradero y producto de la experiencia
  • Comportamiento mental se clasifica en 3 dominios: cognitivo, afectivo y psicomotor
  • Dominio cognitivo: conocimientos, destrezas y habilidades

Dominio cognitivo

  • Conocimientos: contenido de los cursos que se memoriza y se entiende.
  • Destrezas: un conjunto seriado de comportamientos que llevan a un resultado.
  • Conocimientos y destrezas: se adquieren durante periodos cortos.
  • Habilidades: son destrezas más complejas, adquiridas a lo largo de más tiempo.

Ejemplos

  • Literatura:
  • Conocimiento: reglas de ortografía.
  • Destreza: escribir frases sintácticamente correctas en voz activa.
  • Habilidad: escribir narrativa.
  • Biología:
  • Conocimiento: características de los fósiles del Cámbrico.
  • Destreza: clasificar trilobites y amonites por subespecie.
  • Habilidad: reconstruir fósiles incompletos.
  • Cómo medir aprendizaje
  • El aprendizaje en el dominio cognitivo se mide con reactivos.
  • Un reactivo es una instrucción o pregunta que requiere de una respuesta por parte del examinado y de una regla de calificación por parte del evaluador.
  • La respuesta puede ser escogida o construida.
    • Un reactivo de respuesta escogida es un reactivo de opción múltiple o cerrado.
    • Un reactivo de respuesta construida o abierto puede ser un ensayo, reporte, proyecto, artículo de investigación, etc.
  • Tipos de reactivos
  • Reactivos cerrados
    • Se utilizan cuando la respuesta correcta es única y el examinado la escoge a partir de una serie de opciones dadas.
  • Reactivos abiertos
    • Se utilizan cuando el examinado construye la respuesta individualmente.
    • Calificados con Checklist o correcto/incorrecto, cuando lo que se califica tiene muchas respuestas correctas.
    • Calificados con rúbrica, cuando lo que se califica es conocimiento complejo.
  • Los reactivos se refieren a dos dimensiones:
  • Contenido y Conducta Cognitiva
  • El Contenido puede ser de 4 tipos:
  • Los Hechos son conocimiento básico indiscutible.
  • Los Conceptos pueden ser abstractos (claridad, originalidad, eficacia) y concretos (costo, volumen, peso, distancia).
  • Los Principios pueden ser causa-efecto, axiomas, leyes de probabilidad, etc.
  • Los Procedimientos pueden ser simples (destrezas) o complejos (habilidades). En general son tangibles, secuenciales y observables.
  • La Conducta Cognitiva puede ser:
  • Memorización se refiere a recordar conocimiento declarativo.
  • Entendimiento se refiere a la comprensión del contenido: hechos, conceptos, principios y procedimientos.
  • Solución de problemas implica una combinación de pasos físicos y mentales para llegar a una solución.
  • Pensamiento crítico implica evaluación, predicción y pensamiento deductivo e inductivo.
  • Creatividad implica pensamiento creativo y producción creativa.
  • Conducta Cognitiva vs. Dominio Cognitivo:
  • Conocimientos
  • Destrezas y Habilidades
  • El aprendizaje de conocimientos, destrezas y habilidades se puede medir con reactivos, ya sea de respuesta escogida o de respuesta construida.
  • Verbos utilizados según conducta cognitiva:
  • Ejemplos de reactivos que requieren distintas conductas cognitivas
  • Los reactivos cerrados o de opción múltiples son ideales para medir:
  • Memorización del contenido: conocimiento declarativo.
  • Entendimiento del contenido: de los hechos, de los conceptos, de los principios y de los procedimientos.
  • No son adecuados para medir pensamiento complejo.
  • Los multireactivos de opción múltiple pueden ser usados para medir:
  • Destrezas y habilidades mentales, cuando existe una única respuesta correcta.
  • En este caso se hace uso de conjuntos de reactivos de opción múltiple ligados a un mismo texto inicial que funciona como estímulo común.
  • Los reactivos abiertos son ideales para medir:
  • El pensamiento complejo se mide únicamente con reactivos abiertos.
  • Cobertura del dominio. Permiten cubrir el contenido del dominio utilizando muchas preguntas que el examinado contesta en poco tiempo. Esto no es fácil de lograr con ensayos.
  • Confiabilidad. La consistencia de los resultados de los examinados en el tiempo son una medida de la confiabilidad de una prueba. El error de medida de una prueba de opción múltiple es una variable fácilmente controlable.
  • Eficiencia. Los reactivos son reutilizables. El costo de calificarlos es mucho menor que el costo de calificar ensayos.
  • Objetividad. Permiten comparar el desempeño de distintas poblaciones en distintas circunstancias y a distintos tiempos.
  • Calificación automática. Es un proceso de fácil automatización.
  • Ventajas de los reactivos de
  • opción múltiple
  • Desventajas de los reactivos de
  • opción múltiple
  • Trivialización. Puede dar lugar a que se enseñe y se examine lo trivial. No se deben limitar a examinar memorización de contenido.
  • Inapropiados para medir pensamiento complejo. Habilidades de escritura o de pensamiento crítico no pueden ser medidas con OM.
  • El examinado no escribe nada durante la prueba. Es aconsejable mezclar OM con ensayos.
  • Multirreactivos:
  • Son conjuntos de reactivos de opción múltiple convencionales, agrupados alrededor de un único estímulo.
  • Son útiles para medir entendimiento, solución de problemas y pensamiento crítico. Se debe tener cuidado que la respuesta de cada reactivo dentro del multireactivo no dependa de la respuesta de otro.
    • Lea con cuidado el siguiente texto y conteste las preguntas 1 y 2:
    • Una revolución del Cámbrico fue sin duda la aparición de esqueletos, quizás motivada por los cambios en la química de los océanos (los continentes estaban en posición ecuatorial, con climas muy cálidos y fácil precipitación de carbonatos, por lo que el gasto metabólico era menor). También la aparición de nuevos predadores
        • 1. Identifique … 2. Estime …
        • A. A.
        • B. B.
        • C. C.
  • Multirreactivo de Comprensión:
  • Se utilizan para medir comprensión de lectura. El ejemplo mide, con 8 preguntas, si es posible identificar:
  • 1. idea principal.
  • 2. características de personaje principal.
  • 3. un conflicto o problema.
  • 4. un detalle importante en el significado de la historia.
  • 5. una secuencia de eventos.
  • 6. una relación causal.
  • 7. el final de la historia.
  • 8. el pasado de la historia.
  • Multirreactivo Pictórico:
  • Ideal para medir habilidades de alta inferencia que involucren entendimiento y pensamiento crítico utilizando gráficas, fotografías o cualquier otro material visual.
  • Multireactivo de solución de problemas:
  • Es una de las mejores maneras de medir destrezas y habilidades en la solución de problemas, en lugar de utilizar un formato de ejecución.
  • Reactivos para medir aprendizaje complejo
  • Reactivos abiertos
    • Se utilizan para medir entendimiento, solución de problemas, pensamiento crítico y creatividad.
    • Se califican con Checklist o correcto/incorrecto, cuando el resultado tiene muchas respuestas correctas
    • Se califican con rúbrica, cuando el resultado no es tangible
  • Distintos tipos de reactivos abiertos
  • Demostración
  • Ensayo
  • Examen Oral
  • Reseña/Crítica
  • Experimento
  • Examen de ejecución
  • Proyecto
  • Reporte de investigación
  • Reactivo abierto: Demostración
  • Este tipo de reactivo se utiliza cuando se requiere que el examinado demuestre una habilidad o destreza física.
  • Demuestre usted cómo se prepara a un paciente para colocarle un catéter.
  • Se puede calificar con:
  • checklist si los pasos intermedios para llegar a la solución son únicos. En este caso el checklist consiste de una lista de los pasos más importantes para llevar a cabo la tarea.
  • rúbrica si lo que se califica no es tangible, como eficiencia, dominio, atención al paciente, etc. En este caso, la rúbrica describe el estándar y las desviaciones de éste.
  • Reactivo abierto: Ensayo
  • Este tipo de reactivo se utiliza cuando se requiere que el examinado argumente de manera razonada su posición o punto de vista acerca de alguna controversia.
  • Defienda su argumento a favor o en contra de la economía de libre mercado.
  • Históricamente es el reactivo abierto más usado: surge de manera natural la costumbre de hacer una pregunta y esperar que el examinado la conteste por escrito para calificarla. Dado que este método de calificación es costoso, fue que surgieron las preguntas de opción múltiple.
  • Se puede calificar con checklist o rúbrica.
  • Reactivo abierto: Examen oral
  • Este tipo de reactivo es muy popular en el salón de clases, aunque también se utiliza en exámenes de certificación de profesiones y dominio de idiomas.
  • Describa usted qué dice la reglamentación acerca del desecho de material biológico en hospitales públicos.
  • Se puede calificar con:
  • checklist si los pasos intermedios para llegar a la solución son únicos,
  • rúbrica si lo que se califica requiere de pensamiento crítico o creatividad.
  • Reactivo abierto: Reseña/Crítica
  • Este tipo de reactivo se utiliza para evaluar pensamiento crítico. Una manera efectiva de medirlo es pidiendo al examinado que reseñe o critique un evento, acción, política, representación.
  • Reseñe usted la tendencia de los trabajos presentados en el último Congreso Nacional.
  • Se puede calificar con una rúbrica enfocada a evaluar el pensamiento crítico y la habilidad de expresarlo.
  • Reactivo abierto: Experimento
  • Este tipo de reactivo requiere que el alumno prepare y lleve a cabo un experimento, registrando todas sus observaciones.
  • En un cuarto cerrado con los vidrios empañados, haga el experimento de tratar de quitar el vapor con aire caliente. Reporte el resultado y conclusiones.
  • En general se puede calificar con checklist ya que el experimento implica pasos intermedios únicos para llegar al resultado.
  • Reactivo abierto: Observación apoyada en instrumentos
  • Este tipo de reactivo se utiliza cuando el resultado esperado es medido cuantitativamente: tiempo, peso, longitud, volumen, área, color. Es muy usado en clases de ciencia.
  • Utilizando un teodolito, determine usted cuál es la diferencia en altura entre el borde sur del río y el borde norte.
  • Dado que el resultado está definido de manera precisa, se puede calificar con checklist o simplemente con éxito/fracaso.
  • Reactivo abierto: Examen de ejecución
  • Este tipo de reactivo es muy popular en artes escénicas: música instrumental, teatro, canto, actuación. También se utiliza para certificación profesional.
  • Ejecute usted el primer movimiento del Concierto No. 1 de Beethoven.
  • Realice la extracción del molar en el paciente.
  • En general, este tipo de examen se califica con rúbrica, ya que se mide la competencia en varias escalas, como son estilo, dominio, seguridad, soltura, improvisación, etc.
  • Reactivo abierto: Proyecto
  • Este tipo de reactivo se ha convertido en el pilar de la enseñanza moderna en el salón de clases.
  • Diseñe y construya un robot autónomo guiado por un rayo laser.
  • Ofrecen la oportunidad de que el alumno haga gran cantidad de trabajo individual y colectivo, muestre sus conocimientos y experimente caminos nuevos, evidenciando creatividad.
  • Su calificación se debe hacer con rúbricas, que definan los estándares mínimos requeridos para acreditar la tarea.
  • Reactivo abierto: Reporte de investigación
  • Este tipo de reactivo complementa al proyecto y se ha convertido en el pilar de la enseñanza a nivel universitario. Inclusive, es el método más común para medir originalidad y creatividad en las ciencias básicas.
  • Elabore el reporte de investigación del proyecto “Robot autónomo guiado por un rayo laser”.
  • Su calificación es muy compleja, ya que debe comprender muchos ejes, como son: conocimiento, dominio del tema, dominio del idioma, estado del arte, presentación de resultados, factibilidad, método, etc. Se debe utilizar una rúbrica.
  • Calificación de reactivos abiertos
  • Para otorgar una puntuación a quien presenta un reactivo abierto, es necesario utilizar guías impresas que le describan al examinador cuáles son las evidencias que debe buscar para confirmar que el examinado ha efectivamente aprendido.
  • Esto se puede hacer con:
    • checklists, si lo que se busca es únicamente confirmar que se ha cumplido con una serie de pasos, o con
    • rúbricas si es necesario confirmar que se ha adquirido conocimiento complejo.
  • Si
  • No
  • El alumno muestra conocimiento sobre el tema
  •  
  •  
  • Las ideas y conceptos de la presentación son fáciles de entender.
  •  
  •  
  • El alumno utiliza ejemplos claros, muestra evidencias y/o se apoya con material gráfico.
  •  
  •  
  • El alumno hace uso de lenguaje apropiado para el tipo de presentación.
  •  
  •  
  • Los gestos y el lenguaje corporal son adecuados.
  •  
  •  
  • Mantiene contacto visual con el público todo el tiempo.
  •  
  •  
  • El alumno articula claramente.
  •  
  •  
  • Rúbrica:
  • Es una guía que se utiliza para otorgar una puntuación a quien presenta un reactivo abierto de aprendizaje complejo.
  • Contiene criterios preestablecidos que permiten determinar niveles de ejecución de diferente calidad: es una escala graduada.
  • Hace referencia a la calidad de las respuestas esperadas con relación al uso de destrezas o la aplicación de conceptos desarrollados.
  • Contiene descriptores que definen qué observar a cada nivel de ejecución.
  • Las rúbricas pueden ser Globales o Analíticas.
  • Rúbricas globales:
  • Se utiliza cuando se toleran errores en el proceso, siempre que el resultado final sea de alta calidad.
  • Al examinado se le presenta un problema complejo.
  • La respuesta correcta no es única.
  • El sinodal evalúa la totalidad del proceso o producto sin juzgar por separado las partes que lo componen.
  • Ventaja: el proceso de evaluación es rápido.

Evaluación global

  • Rúbrica analítica:
  • Se utiliza cuando se requiere de detalle en la evaluación.
  • El alumno obtiene varias puntuaciones, que se utilizan para calcular numéricamente un puntaje final.
  • El proceso de evaluación es más lento.
  • Ventajas:
    • Permite crear un perfil de fuerzas y debilidades y ofrecer retroalimentación al examinado.
    • Permite hacer la evaluación referida al criterio.
  • Evaluación de un proyecto

Evaluación de un reporte de investigación

Evaluación del proyecto ‘encuesta’

Componentes de Rúbrica analítica:

  • Elementos del dominio o criterio
  • Criterios de ejecución
  • Componentes de Rúbrica analítica:
  • Descriptores del criterio
  • Componentes de Rúbrica Analítica:
  • Escala
  • (niveles de ejecución, puntuaciones a otorgar)
  • Componentes de Rúbrica analítica:
  • Características de una Rúbrica
  • Continuidad en la escala: el cambio en calidad de un nivel de ejecución al siguiente debe ser “igual” en todos los intervalos; los criterios de ejecución deben reflejar esta continuidad.
  • Paralelismo en los criterios: cada descriptor debe mantener paralelismo con sus descriptores vecinos, en términos del lenguaje utilizado en cada oración.
  • Coherencia en los criterios: aun cuando los descriptores son diferentes para distintos niveles de ejecución, los cambios se deben referir a cambios en calidad para un mismo criterio.
  • Válida: permite evaluar lo relevante en el dominio, no lo que es fácil de observar y/o calificar.
  • Confiable: ofrece resultados consistentes para distintos jueces, distintos examinados y distintos tiempos.
  • Pasos para diseñar una rúbrica analítica:
  • Examinar los objetivos de aprendizaje a los que se referirá la tarea. Redactar los elementos del dominio.
  • Identificar las evidencias específicas, observables, que se desee muestre el examinado durante el desarrollo de la tarea, para cada elemento del dominio. Ubicarlas en el nivel de ejecución que les corresponda.
  • Hacer una lluvia de ideas para encontrar características que describan cada evidencia en el resto de los niveles de ejecución. Estas características se convertirán en los descriptores del criterio.
  • Redactar descripciones narrativas detalladas para el desempeño Excelente, Muy Bueno, Mínimamente Aceptable y No Acreditado, para cada una de las evidencias.
  • Revisar continuamente la rúbrica, después de cada aplicación.

Bibliografía

  • Thomas M. Haladyna, “Developing and Validating Multiple-Choice Test Items”, Lawrence Erlbaum Associates, 2004.
  • Thomas M. Haladyna, “Writing Test Items to Evaluate Higher Order Thinking”, Allyn & Bacon, 1997.


La base de datos está protegida por derechos de autor ©absta.info 2016
enviar mensaje

    Página principal