Las evaluaciones externas en Colombia Evolución y balance Margarita Peña Borrero Directora General – icfes bogotá, octubre 23 de 2008 Contenido



Descargar 28,85 Kb.
Fecha de conversión03.04.2017
Tamaño28,85 Kb.

Las evaluaciones externas en Colombia Evolución y balance Margarita Peña Borrero Directora General – ICFES Bogotá, octubre 23 de 2008

Contenido

  • Algo de historia, para entender mejor el presente
  • Las evaluaciones nacionales (“ICFES” y SABER)
  • Evaluaciones internacionales
  • Balance de la experiencia: logros, tensiones y tareas pendientes

1. Algo de historia...

  • 1968 – creación del ICFES:
    • Servicio Nacional de Pruebas (SNP): Exámenes nacionales para admisión, para garantizar igualdades en las oportunidades de acceso a la educación post-secundaria con base en el mérito – examen de Estado para el ingreso a la educación superior
    • Establecimiento de capacidad en el campo de la medición

Características de los primeros exámenes (década de los 70):

  • Características de los primeros exámenes (década de los 70):
    • Combinación entre pruebas de aptitudes (verbal, matemática, razonamiento abstracto y relaciones espaciales) y de conocimientos (lenguaje, matemáticas, ciencias naturales, sociales e idiomas) considerados como básicos para ingresar a la educación superior

1980: Cambio en el propósito del propósito del examen

  • 1980: Cambio en el propósito del propósito del examen
    • Obligatoriedad de informar al Ministerio de Educación los nombres de los colegios en las que la mayoría de estudiantes obtuviera menos del puntaje mínimo ponderado en los exámenes de Estado
      • Resultados del examen como indicadorde calidad
      • Mejoramiento a partir de la evaluación
      • Informes agregados por institución educativa (ordenamiento, más tarde clasificaciones)
      • Recolección de información socioeconómica abrió paso a investigaciones sobre movilidad social, peso del nvel socioeconómico sobre el rendimiento

Características de los exámenes (década de los 80):

  • Características de los exámenes (década de los 80):
  • Examen estructurado en cinco áreas:
    • Ciencias: biología, química y física
    • Sociales: historia, geografía y filosofía
    • Matemática: conocimientos en matemática y aptitud matemática
    • Lenguaje: lenguaje y aptitud verbal
    • Electiva: una prueba elegida entre: (a) formación específica de colegios diversificados (comercio, electricidad); (b) conocimientos específicos (idiomas); o (c) habilidades básicas (razonamiento espacial, aptitud mecánica)

Características de los exámenes (década de los 80):

  • Características de los exámenes (década de los 80):
  • Aptitudes y conocimientos (en forma más amplia)
  • Forma de presentación de los resultados individuales, vigente entre 1980 y 1999:
    • Puntaje total derivado de los resultados de cada prueba respondida. Este puntaje tenía un promedio de 250 puntos y una desviación estándar combinada de 50 puntos.
    • Calificación con referencia a norma
    • El puntaje máximo se encontraba alrededor de 400 puntos y el mínimo alrededor de 100 puntos

Ejemplo de pregunta (década de los 80):

  • Ejemplo de pregunta (década de los 80):
    • La hemofilia se considera como un caso de:
    • herencia ligada al sexo
    • no disyunción
    • dominancia incompleta
    • sobrecruzamiento
    • mutación radioactiva
  • (abril de 1988) Clave: A

Década de los 90

  • Descentralización y autonomía curricular y evaluaciones como mecanismo para dar mensaje unificado y establecer qué tanto se cumplen objetivos educativos
  • Interés público en resultados de la educación (rendición de cuentas – “responsabilización”)
  • Incorporación al examen de elementos de la la “evaluación de calidad” de la educación básica provenientes de SABER

Década de los 90

  • Primera evaluación de calidad educativa: SABER
    • Evaluación de áreas críticas para el aprendizaje (lenguaje, matemática)
    • Evaluación con referencia a criterio – niveles
    • Enfasis en divulgación de resultados con propósitos de mejoramiento
    • Estudio de factores asociados (escolares y extraescolares)
    • Seguimiento a la evolución de resultados (periodicidad, permanencia de características de diseño)

Desde 2000...

  • Nuevo “ICFES”
  • SABER censal
  • Participación creciente en evaluaciones comparativas internacionales
  • Demanda de información sobre calidad de la educación, como insumo para política y planes, entre otros
  • Nuevos desafíos para el ICFES como evaluador externo

2. Evaluaciones nacionales: El “ICFES”

  • Propósitos (explícitos)
    • Criterio para el ingreso a la educación superior (se mantiene obligatoriedad)
    • Información para los estudiantes acerca de sus competencias en las diferentes áreas: orientación sobre su opción profesional
    • Criterio para la autoevaluación de las escuelas en función de sus currículos y la diversidad cultural
    • Criterio para otorgar beneficios educativos (becas, premios)
    • Base para estudios de carácter cultural, social y educativo, y retroalimentar el quehacer de la evaluación

Enfoque

  • Enfoque
    • Evaluación por competencias – saber hacer en contextos disciplinares
    • Cambio de evaluar qué se sabe hacia cómo se usa ese saber
    • Las competencias evaluadas abarcan:
      • Interpretación: de un texto, un gráfico, un mapa…
      • Solución de problemas
      • Valoración de conceptos y teorías para sustentar una decisión

Estructura del examen:

  • Estructura del examen:

Reportes e informes

  • Individuales
  • Agregados
  • Puntaje por prueba (0-100)
  • Puntaje por componente y competencia de prueba (0-10)
  • Niveles por componente (A,M,B), y competencia (I-II-III) de prueba
  • Nivel de competencia en inglés (MCE)
  • Puesto
  • Puntaje promedio de prueba, para colegio, municipio, dept., país (0-100), genero y sector
  • Clasificación de colegios (7 categorías)
    • - Alto impacto, mayor controversia
  • Evolución de resultados – históricos (colegios y entidades territoriales)
  • NUEVO* Informe resultados/nivel socioeconómico

Usos más frecuentes en la actualidad

  • Usos más frecuentes en la actualidad
    • Criterio de admisión en educación superior
    • Otorgamiento de beneficios (reconocimientos, becas créditos)
    • Predicción de riesgo de deserción en educación superior
    • Autoevaluación – mejoramiento*
    • Monitoreo de calidad de la educación*
    • Clasificaciones, “ordenamientos”*

2. Evaluaciones nacionales: SABER

  • Objetivo
    • Evaluar las competencias básicas de los alumnos de educación básica y los factores asociados a su desempeño, para:
      • Producir indicadores de calidad educativa
      • Identificar factores escolares que afectan los resultados
      • Informar a las instituciones educativas, a los gobiernos nacional y territoriales y a otros actores, sobre debilidades y fortalezas, como insumo para la toma de decisiones
      • Informar al público sobre el estado de la educación
      • Monitorear resultados en el tiempo
  • Aplicación
  • Carácter
  • Aéreas
  • Grados
  • Factores
  • Asociados
  • 1992-1993
  • Muestral
  • Matemática y Lenguaje
  • 3, 5, 7 y 9
  • Si
  • 1997-1998
  • Muestral
  • Matemática y Lenguaje
  • 3, 5, 7 y 9
  • Si
  • 2002-2003
  • Censal y muestral quasi- controlada” (Antioquia, Nariño y Bogotá)
  • Matemática, Lenguaje, Ciencias Naturales y Competencias Ciudadanas
  • 5 y 9
  • No
  • 2005-2006
  • Censal 90% y 10%
  • Muestral Controlada
  • 5 y 9
  • No
  • Qué ha evaluado SABER

Reportes e informes

  • Institucionales
  • Puntajes promedio por área y grado
  • Niveles de logro por área y grado
  • Puntajes promedio por competencias
  • Puntajes promedio por componentes de las áreas
  • Municipios y departamentos
  • Puntajes promedio por área y grado
  • Niveles de logro por área y grado
  • Nacionales
  • Puntajes promedio por área y grado
  • Niveles de logro por área y grado

Usos

  • Usos
  • Insumo para autoevaluación y diseño de planes de mejoramiento institucional
  • Focalización de escuelas con bajo logro para fines de asesoría y acompañamiento específico
  • Focalización de entidades territoriales con bajo logro para fines de asesoría y acompañamiento
  • Base para el diseño de programas de formación de docentes
  • Monitoreo de la calidad de la educación

Permiten la comparación (referenciación) de resultados

  • Permiten la comparación (referenciación) de resultados
  • de la educación colombiana con la de otros países y dan
  • información valiosa para mejorar
  • Conocimiento compartido (común) sobre educación - Importancia en debate educativo mundial
  • Metodología rigurosa para permitir comparaciones entre países y en períodos de tiempo (muestras, instrumentos, técnicas de procesamiento y análisis de información)
  • Estudios innovadores en cuanto a enfoques, campos y técnicas de evaluación
  • 3. Evaluaciones internacionales
  • PRUEBA
  • AÑO
  • AREA
  • GRADOS
  • TIMSS
  • 1995
  • Matemáticas y Ciencias
  • 7 y 8
  • 39 (7°)
  • 41 (8°)
  • LLECE
  • 1997
  • Matemáticas y Lectura
  • 3 y 4
  • 13
  • CIVED
  • 1999
  • Civica
  • 8 (14 Años)
  • 32
  • PIRLS
  • 2001
  •  Lectura
  • 4
  • 35
  • PISA
  • 2006
  • Matemáticas Lectura Ciencias
  • 15 años
  • 57
  • SERCE
  • 2006
  • Matemáticas Lectura Ciencias
  • 3 y 6
  • 16 (1°)
  • ICCS
  • 2008
  • Cívica
  • 8 y 9
  • 37
  • PISA
  • 2009
  • Matemáticas Lectura Ciencias
  • 15 años
  • 69
  • Colombia en las evaluaciones internacionales

Promedio OCDE = 500

  • Colombia
  • Intervalo de
  • confianza al 95%
  • Promedio
  • Percentil 95
  • Percentil 5
  • 388 (3,4)
  • Estadísticamente Iguales
  • PISA - Posición de Colombia frente al resto de países: Ciencias
  • 150
  • 200
  • 250
  • 300
  • 350
  • 400
  • 450
  • 500
  • 550
  • 600
  • 650
  • 700
  • 750
  • Chile
  • Uruguay
  • México
  • Argentina
  • Brasil
  • Colombia
  • 438
  • 428
  • 410
  • 391
  • 390
  • 388
  • Intervalo de
  • confianza al 95%
  • Promedio
  • Percentil 95
  • Percentil 5
  • (4,3)
  • (2,7)
  • (2,7)
  • (6,1)
  • (2,8)
  • (3,4)
  • Ciencias - Puntaje promedio (América Latina)
  • PISA -Niveles de desempeño:
  • Lectura
  • Lectura
  • Demuestran comprensión completa de un texto e interpretación del significado de un lenguaje matizado. Son capaces de evaluar textos de manera crítica, de formular hipótesis sobre éstos y de hacer uso de conocimientos especializados, entre otros.
  • Integran distintas partes de un texto para identificar una idea principal, para comprender una relación o para interpretar el significado de una palabra o frase. Manejan información contradictoria y realizan conexiones o comparaciones, para explicar y evaluar un texto.
  • Realizan tareas básicas de lectura como identificar la idea principal, interpretar el significado de una parte limitada del texto y realizar deducciones simples. También explican las características del texto haciendo uso de sus experiencias y actitudes personales.
  • Reconocen la intención del autor sobre un tema familiar, localizan fragmentos independientes de información y realizan conexiones simples con su conocimiento habitual.
  • 5
  • 4
  • y
  • 3
  • 2
  • 1
  • y
  • 0
  • Niveles de desempeño
  • Se caracterizan por su potencial para desarrollar actividades de alta complejidad cognitiva, científica o de otra naturaleza.
  • Están por encima del nivel mínimo y tienen capacidad para realizar actividades cognitivas complejas, aunque no con un nivel óptimo.
  • Empiezan a demostrar competencias que les permiten participar efectiva y productivamente en la sociedad contemporánea.Cuentan con las habilidades mínimas necesarias para desenvolverse adecuadamente en la vida actual.
  • Los estudiantes no cuentan con capacidades suficientes para desarrollar actividades propias de la sociedad del conocimiento ni para acceder a estudios superiores.
  • 5
  • y
  • 6
  • 4
  • y
  • 3
  • 2
  • 1
  • y
  • 0
  • PISA - Rendimiento y nivel socioeconómico

SERCE - Puntaje Promedio (Matemáticas 6o)

SERCE - Niveles de Desempeño (Mat6)

  • Sexto
  • Nivel I (309,64)
  • 13%
  • Reconocen hechos, conceptos, relaciones y propiedades en los distintos dominios, con excepción del variacional.
  • Resuelven problemas simples de estructura aditiva en el dominio numérico.
  • Nivel II (413,58)
  • 48%
  • Reconocen hechos, conceptos, propiedades y relaciones en los distintos dominios conceptuales.
  • Resuelven problemas que requieren estrategias simples, con información relevante explícita y que involucran una o dos de las cuatro operaciones básicas.
  • Nivel III (514,31)
  • 33%
  • Resuelven problemas que involucran el uso de conceptos, relaciones y propiedades de mayor nivel cognitivo. Pueden interpretar información de distintas representaciones.
  • Nivel IV (624,60)
  • 5,5%
  • Resuelven problemas complejos, con información no explícita y que requieren el uso de relaciones y conexiones entre diferentes conceptos.

4. Balance

    • Avances
    • Credibilidad y legitimidad
    • Avances en medición y evaluación de calidad
    • Contribución a la “cultura de la evaluación”
      • Aporte al debate público (interés en educación)
      • Toma de decisiones
      • Seguimiento a resultados
      • Uso (aunque parcial) como mecanismo de rendición de cuentas

La controversia:

  • La controversia:
    • Emisión de juicios basados únicamente en resultados de pruebas
    • Reducción de la educación a lo que se puede evaluar con este tipo de pruebas
    • Tensión entre necesidad de “medir con una misma regla” y Dificultad para comparar grupos con condiciones socioculturales distintas
    • “Relatividad” de los resultados, frente a condiciones específicas de estudiantes e instituciones educativas
        • Sistema de indicadores vrs. simplificación en puntajes o rankings
  • ¿qué quiere decir “evaluar calidad”?

Los desafíos

  • Los desafíos
    • Cumplimiento de los propósitos de las evaluaciones
      • Diseño técnico de los instrumentos (estructura, número de preguntas, modelos de calificación, comparativos históricos, entre otros)
      • Informes comprensibles y oportunos para los grupos interesados
      • Difusión de resultados con estrategias diferenciadas
    • Transparencia sobre el alcance: generar conciencia sobre las posibilidades y limitaciones de las evaluaciones, para evitar usos indebidos de los resultados
    • Avanzar en la construcción de un sistema de indicadores más rico, incorporando información socioeconómica y cultural, y condiciones de las instituciones educativas

SABER 2009: Consolidación de la evaluación nacional

  • Estabilizar la evaluación (ciclos trienales hasta 2021): áreas evaluadas y estructura
    • Mejoramiento del diseño
  • Combina muestra controlada, para mejorar resultados agregados, y censo para entregar resultados por IE
  • Estudio de los factores asociados para avanzar en evaluación de calidad e informar decisiones de política
  • Informes diferenciados, centrados en el uso de los resultados
  • Investigación

“ICFES”

  • Levantamiento de información socioeconómica para producir nuevos informes e indicadores
  • Identificación de necesidades y demandas de los usuarios
  • Mejoramiento técnico del diseño de las pruebas
  • Investigación y estudios para mejorar el examen (análisis de restricciones, cumplimiento de propósitos, usos no adecuados, entre otros)

Competencias: eje articulador del sistema

  • BÁSICA
  • SECUNDARIA
  • MEDIA
  • TECNICA PROFESIONAL
  • TECNOLÓGICA
  • PROFESIONAL UNIVERSITARIA
  • COMPETENCIAS BÁSICAS
  • SABER 5°
  • SABER 9°
  • Examen de Estado 11°
  • ECAES
  • COMPETENCIAS LABORALES ESPECÍFICAS Y PROFESIONALES
  • COMPETENCIAS LABORALES GENERALES
  • COMPETENCIAS CIUDADANAS
  • SUPERIOR
  • PRIMERA INFANCIA
  • POSGRADOS
  • FORMACIÓN DURANTE TODA LA VIDA

Muchas gracias

  • www.icfes.gov.co
  • www.icfesinteractivo.gov.co


La base de datos está protegida por derechos de autor ©absta.info 2016
enviar mensaje

    Página principal