Mostrando entradas con la etiqueta Indicadores. Mostrar todas las entradas
Mostrando entradas con la etiqueta Indicadores. Mostrar todas las entradas

miércoles, 18 de febrero de 2009

Calidad educativa en tiempos de internet

Indicadores de calidad educativa en tiempos de internet

Hace unas semanas se publicó en los medios impresos que la Universidad Nacional Autónoma de México (UNAM) es una de las mejores universidades del mundo según los indicadores creados por el Laboratorio de Cibermetría, del Consejo Superior de Investigaciones Científicas de España. La UNAM ocupa el número 44 en el 2009. Estos indicadores se refieren a aspectos que cubren la utilización de internet en el funcionamiento global de las universidades.

Este listado de universidades tiene como objetivo apoyar las iniciativas "Open Access", así como promover el acceso electrónico a las publicaciones científicas y a todos aquellos materiales de tipo académico. Se parte de los supuestos que la publicación web es más barata y mantiene los altos niveles de calidad asociados a los procesos de revisión por pares. Potencialmente puede alcanzar audiencias más grandes, ofreciendo acceso al conocimiento científico a investigadores e instituciones de paises en vías de desarrollo, además de a terceras partes (empresas, sectores económicos, sociales, culturales o políticos) en sus propias comunidades.

Los indicadores que propone el laboratorio suponen un "modelo de universidad" y buscan adaptarse a la nueva dinámica del siglo XXI, dinámica que tiene como aspectos estructurales el uso de los hipermedios, el acceso a internet y publicación de contenidos digitales.


Inequidad en tiempos de internet

Sin embargo, a pesar de las bondades de los hipermedios, es necesario considerar los problemas que subyacen en esta postura. No es sencillo disminuir la inequidad y falta de acceso a la educación superior en un país como México que posee una cobertura baja, cercana al 25%. Las recurrentes crisis financieras han provocado un estancamiento en la cobertura, desde la década de 1980 se dejaron de construir las universidades que eran necesarias para el crecimiento poblacional del país. Aunque se realizara la apuesta por los hipermedios y el uso de internet se tienen que tomar en cuenta los siguientes aspectos:

1. Contar con dispositivos digitales: computadora, ipod o lectores de mp3 y mp4, teléfonos 3G. A pesar de la reducción del costo de los dispositivos digitales, todavía se encuentran lejos del alcance de muchos jóvenes que estudian en el bachillerato o en la universidad. No se cuenta con un programa a nivel nacional para conseguir que los jóvenes puedan adquirir estos dispositivos. La SEP pretende que los jóvenes que tienen beca utilicen parte de esos recursos para adquirir computadoras. Pero, no se tiene la posibilidad de que se les puedan ofrecer precios preferenciales y el mercado en México no tiene una "mano invisible" que baje los costos de los dispositivos.

2. Acceso a internet. De igual forma, el acceso a internet está limitada a la oferta del mercado en México. Para poder aprovechar de manera interesante el acceso a internet es necesario contar con banda ancha. Es reciente la política de los gobiernos estatales de crear espacios de acceso a internet gratuito. Pero todavía no se sabe con certeza como pueden funcionar, si realmente permiten acceso ilimitado, etc.

3. Publicación de contenidos digitales. Este aspecto no es técnico, es de índole cultural y social. Los hipermedios y el acceso a internet no tienen utilidad alguna si es que no existen contenidos publicados. Sin textos, grabaciones o imágenes digitales, internet sería un globalizado tubo vacío.

4. Una cultura abierta a la comunicación y publicación de contenidos digitales. Otro aspecto sobre el cual es necesario reflexionar, lo constituye el poseer una cultura abierta a la comunicación y publicación de contenidos digitales. La cultura mexicana es más afin al autoritarismo, a la aristocracia y el secreto. Estas tres características impiden la libre circulación de ideas, textos e imágenes.

El poder autoritario teme que se ventilen los problemas públicos, que se elaboren ideas que cuestionen su potestad, bajo este contexto resulta difícil que las ideas viajen y se comuniquen. A los mexicanos nos gustaría ser amados por nuestra sangre azul, todavía sentimos nostalgia de los cuentos de princesas y príncipes. Desearíamos, como los niños y las niñas, tener poder ilimitado y eterno. Creemos que pertenecer a una elite es nuestro privilegio, entonces por qué compartir el conocimiento, eso debilita a la elite política, económica o científica. Finalmente, nuestra cultura privilegia el secretismo. Ya sea por temor a ser asaltados (por ladrones o por la hacienda pública), o de que se entere la pareja, somos dados a ocultar sobre cuánto ganamos, que hacemos en nuestro trabajo. En las familias ocultamos las situaciones delicadas, tales como, las enfermedades, los problemas conyugales, los resultados escolares, los problemas laborales, los problemas financieros... en pocas palabras, la vida entera. La vida pública está llena de pactos "en lo oscurito", se oculta la información que debería ser pública. Estos elementos limitan las posibilidades de disminuir la inequidad utilizando los hipermedios.


Podcasting en la UNAM

Una de las iniciativas más recientes de la UNAM es la creación de un sitio de podcasting. Este sitio se llama Descarga Cultura y publica contenidos que se pueden descargar en un dispositivo digital como mi viejo Ipod Nano. Algunos de los contenidos que ofrece el sitio son: literatura, teatro, música, en voz de la academia, temas de bachillerato. Según, Mirna Ortega, responsable del programa de la Coordinación de Difusión Cultural, calcula que en promedio, un alumno ocupa de dos a tres horas diarias en transportarse. Por ello, se pensó en un programa que pudiera “ofrecerles una alternativa en el tiempo que emplean en esta actividad, así como en su tiempo de ocio, cuando hacen ejercicio, caminatas, viajes en bicicleta y otros momentos”.

El sitio es relativamente nuevo y todavía ofrece muy pocos contenidos, pero podemos disfrutar del relato corto de H. P. Lovecraft "Polaris", o la poesía de Nezahualcóyotl. Si bien es una excelente iniciativa, el sitio todavía no ofrece los contenidos gratuitos que ofrecen las principales universidades de los Estados Unidos a través de la tienda de itunes. El problema de acceso a esos contenidos, no es el costo, sino el idioma. Aquellas personas que no comprendan la lengua inglesa no puede aprovechar esta oportunidad de aprendizaje.

Si Descarga Cultura deseara convertirse en un punto de referencia del podcasting en castellano, tendría que superar los cuatro aspectos mencionados y que limitan la utilización de los hipermedios e internet.

jueves, 17 de julio de 2008

Indicadores de calidad en universidades en el Reino Unido

Se ha presentado el listado de la mejores universidades en el Reino Unido que puede consultarse en The Complete University Guide.

¿Cómo se realiza este listado? Con base en algunas estadísticas del Higher Education Statistics Agency (HESA) se elaboran 9 indicadores para establecer la calidad educativa de las universidades:

a) La satisfacción estudiantil (Student satisfaction)
b) La investigación (Research assessment)
c) Los resultados de examenes estandarizados de ingreso (Entry standars)
d) La proporción estudiantes / profesores (Student–Staff Ratio)
e) Gasto en servicios académicos (Academic services spending).
f) Gasto en servicios al estudiante (Facilities spending).
g) Honores académicos (Good Honours).
h) Empleo en los graduados (Graduate prospects).
i) Tasa de egreso (Completion).

Una explicación más detallada sobre los indicadores y el procedimiento de su obtención se puede leer aquí (en inglés).

Los indicadores elegidos muestran, o mejor dicho, no muestran algunas características que usualmente preocupan dentro del sistema universitario de México como los aspectos relacionados con la gestión institucional o características del programa educativo o de los profesores.

sábado, 21 de junio de 2008

Evaluación de la calidad = ¿mejoramiento de indicadores?

Desde 1990 la educación superior en México ha estado ligada a la evaluación externa para conseguir fondos financieros y mejorar la calidad educativa. Sin embargo, este esquema puede presentar el dilema para las instituciones entre "recibir financiamiento" cumpliendo los indicadores que solicitan estos programas de evaluación o "mejorar la calidad educativa" cuyos procesos o resultados "no son visibles" utilizando los indicadores prescritos. Este dilema no pasa desapercibido para Díaz Barriga (2008) y Gil Antón (2006).

Según, Díaz Barriga, en este enfoque de evaluación / financiamiento la calidad es concebida como un mejoramiento de un conjunto de indicadores. El autor dirige nuestra atención a la definicion operacional de la calidad educativa. Muchos de los indicadores que se utilizan para evaluar a las instituciones de educación superior (IES) se refieren a aspectos de gestión institucional, infraestuctura, carácterísticas de los docentes, etc. Sin embargo, no siempre existen o se utilizan indicadores que de manera explícita se relacionen con el proceso de la educación. Es importante profundizar en este aspecto, ¿por qué no existen este tipo de indicadores? ¿es por su naturaleza? ¿por su complejidad? ¿ o se debe a tipo de procesos que se utilizan para evaluar a las IES? ¿el costo de la obtención de la información?

Queda claro que cuando los indicadores se encuentran directamente relacionados con el proceso que deseamos modificar o mejorar son buenos indicadores (Martinic, 1997; Mondragón Pérez, 2002). Por lo tanto, los indicadores pueden contribuir a mejorar la infraestructura, tener procesos de gestión eficientes, contar con bibliotecas de primer nivel. Pero, en muchos programas para evaluar a las IES utilizan indicadores que se encuentran orbitando el proceso educativo. Se trata al proceso educativo como a un agujero negro en el espacio, sabemos que está allí, sin embargo, no se puede ver.

El texto de de Gil Antón invita a las siguientes reflexiones:
  • ¿Cuál es la principal razón por la que los indicadores en los programas de evaluación de las IES en México no ponen el énfasis en el proceso educativo?
  • ¿Cuál es la calidad de los indicadores que evaluan la calidad educativa?
Recursos asociados:

Díaz Barriga, A. (coordinador) (2008): Impacto de la Evaluación en la Educación Superior Mexicana: Un estudio en las universidades públicas estatales. IISUE / ANUIES / Plaza y Valdéz: México.

Gil Antón, Manuel (2006): ¿Cómo arreglar un coche? De los indicadores a la calidad, o de la calidad a los indicadores. Presentación en el Foro sobre Calidad de la Educación Superior. ANUIES / UNAM.
Disponible en:
http://www.riseu.unam.mx/documentos/acervo_documental/txtid0018.pdf

Martinic, S. (1997): Diseño y Evaluación de Proyectos Sociales. Herramientas para el aprendizaje. México: COMEXNI / CEJUV.

Mondragón Pérez, A. (2002): ¿Qué son los indicadores? Notas. Revistas de información y análisis, núm, 19, 2002. Disponible en:
http://www.inegi.gob.mx/inegi/contenidos/espanol/prensa/contenidos/articulos/economicas/indicadores.pdf

lunes, 19 de mayo de 2008

¿Qué indica un indicador, en la vida cotidiana, en la teoría de la medida, en la estadística?

En los últimos 20 o 25 años la educación superior en México ha experimentado una serie de esfuerzos, iniciativas y programas para evaluación con el propósito de mejorar la calidad educativa, y de manera simultánea hacerlo con menos presupuesto. Esta falta de presupuesto se debe en gran medida de la crisis financiera ocurrida en la década de 1980 y acentuada en la década de 1990.

La evaluación de la calidad impulsó una serie de acciones para resolver el problema de ¿cómo evaluar la calidad educativa? Una de las estrategias, si no es la única, ha sido la construcción de indicadores. En el presente, contamos con una enorme cantidad de indicadores y procedimientos para obtener la información. Sin embargo, en estos 20 años no se ha avanzado mucho en reflexionar sobre el concepto de indicador de la calidad educativa. ¿Qué indica un indicador? ¿y un indicador de calidad educativa?

En la literatura encontramos una enorme diversidad de definiciones sobre indicador y no es posible encontrar una definición oficial por parte de algún organismo nacional o internacional, generalmente se describen como herramientas para clarificar objetivos o impactos, medidas de cambio o de resultado, demostraciones de progreso o logro de metas. Esta ausencia de definiciones oficiales provoca que continuamente se confunda a los indicadores con toda una gama de datos disponibles, medidas y estadísticas.

¿Qué es un indicador?

Según el Diccionario de la Lengua Española, indicador es algo, que indica o sirve para indicar. A su vez, indicar quiere decir, mostrar algo o significar con indicios y señales.

El significado en castellano es más bien sencillo, amplio y borroso. No se relaciona, necesariamente con medidas y estadísticas. Si comparamos este significado con dato, medida y estadísticas, podríamos aclarar un tanto las cosas:

Dato es, un antecedente necesario para llegar al conocimiento exacto de algo o para deducir las consecuencias legítimas de un hecho.

Medida es la acción y efecto de medir.

Estadístico, perteneciente o relativo a la estadística. La estadística es el estudio de los datos cuantitativos de la población, de los recursos naturales e industriales, del tráfico o cualquier otra manifestación de las sociedades humanas.

¿Qué indica un indicador en la vida cotidiana?

La dificultad estriba en el uso cotidiano de la palabra indicador. En realidad vivimos en un mundo lleno de indicadores. No todos los indicadores utilizan números. Podemos pensar en un indicador que establece un estado. Por ejemplo, una luz verde o azul nos indica que nuestro teléfono celular está encendido. Otro más, las letras S, PB, M, PA, en un elevador nos indican si estamos en el sótano, la planta baja, el mezzanine o planta alta.

Además, podemos pensar en algun indicador que establece algún indicio de la situación o estatus de un proceso. Regresemos al ejemplo de nuestro teléfono celular, es muy probable que la pantalla cuente con un icono que muestra una pila eléctrica con una línea por la mitad que nos indica que está a media carga. Este indicador todavía no utiliza números y la medida no es muy explícita, ¿qué tanto es media carga?

¿Qué indica un indicador desde la teoría de la medida?

Si nos acercamos a la utilización de los números, el indicador establece algún tipo de medida de la situación o estatus de un proceso. Por ejemplo, el icono de nuestro celular nos muestra que a nuestra batería le quedan 5 horas de uso continuo. En este caso, el indicador incorpora un procedimiento para extraer una medida. Lo que nos lleva a lo que se conoce como teoría de la medida y a responder a la pregunta ¿qué es medir?

Medir consiste en: asignar números a una colección de objetos mediante una regla. Existen los siguientes niveles de medición: nominal, ordinal, de intervalo y de razón.

A nivel nominal asignamos números a una colección de objetos según un atributo o característica como un nombre, por ejemplo, los números telefónicos. El número identifica a un usuario, o cuando asignamos un 2 a las personas de sexo femenino y 1 a personas de sexo masculino. El 1 y 2, simplemente, establecen una distinción.

A nivel ordinal, los números asignados establecen una jerarquía, cuando podemos detectar diversos grados de un atributo o propiedad y establecer un orden. Por ejemplo, otorgamos el número 1 a la concursante más bella del planeta Tierra, el número 2 a la siguiente un poco menos bella, 3 a la siguiente, etc. Sin embargo, no podemos saber con precisión en dónde radica lo más bello o poco menos bello. No podemos asegurar que de 100 concursantes, la número 50 es la “belleza típica” de la especie humana.

A nivel de intervalo, los números asignados siguen reglas más rigurosas, en este nivel de medición además de distinguir las diferencias de grado de una propiedad, distinguimos diferencias iguales entre los objetos. Se asigna un número igual al número de unidades de medida equivalentes que posee un objeto. Por ejemplo, la temperatura. Con el avance de la ciencia hemos desarrollado obtener mediciones precisas de la temperatura con grados Celsius o Fahrenheit o Kelvin (Gillen, 2007). Así tenemos la certeza de que la diferencia entre 25º y 27º (2 grados) es la misma que la de 20º y 22º (2 grados). Otro ejemplo, es la distancia utilizando metros, tendremos la seguridad que los 100 metros que se correrán en los juegos olímpicos del 2008 son los mismos 100 metros que se corrieron en los juegos olímpicos de 1968.

Nivel de razón, este es el nivel de medición más sofisticado. Los números asignados a los objetos cuentan con todas las propiedades de la escala intervalar, además se cuenta un punto cero en la escala. Una puntuación de cero significa la ausencia de la propiedad que se mide. Por ejemplo, cuando usamos la escala Kelvin para medir la temperatura, 0 Kelvin indica que las moléculas y átomos de un sistema tiene el mínimo de energía térmica posible.

¿Qué indica un indicador en la estadística?

La estadística es una rama aplicada de las matemáticas. Esta rama estudia el comportamiento de los datos de poblaciones humanas o del mundo natural. Su origen se remonta a lo que Ian Hacking (2006) demomina “la domesticación del azar” y comprender las leyes de la sociedad. La estadística descriptiva se refiere a las tareas de contar, medir, describir, tabular, ordenar y levantar censos. La estadística inferencial se basa en la teoría de probabilidades. Sin embargo, como nos recuerdan Glass y Stanley (1987) los métodos estadísticos son medios para analizar números en tanto que tales y no en tanto que atributos reales, cuantificados. Cualquier conjunto de números es susceptible de procesarse estadísticamente mediante cualquier técnica. Los métodos estadísticas ni quitan ni ponen a la significación de los números con base en los cuales se efectúan.

Entonces, un dato o estadísticas no necesariamente son indicadores. Las técnicas estadísticas nos pueden hablar del comportamiento de un indicador, pero no le otorga mayor o menor significación. La estadística nos permite sintetizar una enorme cantidad de información, nos ofrece técnicas para encontrar relaciones en una gran diversidad de números, pero ¿necesitamos enormes cantidades de datos para evaluar la calidad de un sistema educativo, o de alguna institución? Tal vez, no basta contar con un par de indicadores, pero 100 indicadores también pueden ser demasiados.

Algunas reflexiones finales

Los indicadores puede tener un uso laxo. Utilizamos una gran cantidad de indicadores en nuestra vida cotidiana, las luces, letras, flechas, símbolos, nos muestran indicios de situaciones o el estado de algún proceso. ¿Este tipo de indicadores son útiles para la evaluación de la calidad educativa? Tengo la impresión que es el uso que se les da a los indicadores dentro del discurso político o de políticas educativas.

O pueden tener un uso más detallado, un uso que nos permita evaluar o evaluar la calidad educativa. No utilizo la palabra medir porque no necesariamente tenemos que apostar por los procesos de medición; cuando entendemos medir como el único proceso de legitimación de una evaluación, o cuando pensamos que las técnicas estadísticas nos ofrecen obtener una falsa sensación de “objetividad”. Sin embargo, en el ámbito de la calidad educativa los indicadores se vinculan fuertemente a las escalas de medición ordinales, ya que cuando hablamos de calidad siempre establecemos una comparación entre una colección de objetos o fenómenos.

A pesar de ello, en realidad, los indicadores dependen de otros aspectos que la asignación de números, según Mondragon Pérez (2002), los indicadores tienen las siguientes características:
  • Estar inscritos en un marco teórico o conceptual que le permita asociarse firmemente con el evento que pretende observar.
  • Ser específicos, es decir estar vinculados con los fenómenos sociales, culturales o de otra naturaleza que se pretende actuar.
  • Ser explícitos.
  • Deben ser relevantes y oportunos.
  • Estar disponibles por un periodo razonable de tiempo.
  • Ser claros, de fácil comprensión para los miembros de la comunidad, de forma que no haya duda o confusión acerca de su significado, y debe ser aceptado, por lo general, como expresión del fenómeno que se desea observar.
Estas características ponen énfasis en la construcción de significados compartidos, de un marco de referencia o conceptual que de sentido a los indicadores. Las sofisticadas técnicas estadísticas dependen de este entramado de significados. Sin un significado y un sentido compartidos los indicadores no son herramientas poderosas para mejorar la calidad educativa.


Recursos asociados:

Diccionario de la Lengua Española 22ª edición. Disponible en: http://buscon.rae.es/draeI/

Guillen, M. (2007): Cinco Ecuaciones que Cambiaron el Mundo. El poder y la oculta belleza de las matemáticas. México: DeBolsillo.

Glass, G., Stanley, J. (1988): Métodos Estadísticos Aplicados a la Ciencias Sociales. México: Prentice-Hall Hispoanoamericana.

Hacking, I. (2006): La Domesticación del Azar. La erosión del determinismo y el nacimiento de las ciencias del caos. España: Gedisa.

Mondragón Pérez, A. (2002): ¿Qué son los indicadores? Notas. Revistas de información y análisis, núm, 19, 2002. Disponible en:
http://www.inegi.gob.mx/inegi/contenidos/espanol/prensa/contenidos/articulos/economicas/indicadores.pdf