Edom- Una Herramienta De Asistencia Para La Dirección De Investigación Y Evaluación Educativa En El Estado De Tlaxcala

EDoM: Una herramienta de Asistencia para la Dirección de Investigación y Evaluación Educativa en el Estado de Tlaxcala Mauricio Ricardo Salado Prado1, Ricardo Solano Monje2 1, 2

Universidad Autónoma de Tlaxcala, Departamento de Ingeniería y Tecnología. Calzada Apizaquito s/n, Apartado Postal #140, Apizaco, Tlaxcala, 90300, México 1 [email protected], [email protected] Resumen. En este trabajo se describe EDoM, una herramienta de asistencia para el personal de la Dirección de Investigación y Evaluación Educativa (DIEE). Como parte del proceso de evaluación a Programas del Estado Mexicano orientados a mejorar la educación básica, el personal de la DIEE extrae manualmente transcripciones textuales de grabaciones de audio y video. Además, para algunos programas es necesario analizar video. Estas actividades llegan a ser altamente tediosas y consumidoras de tiempo. Proponemos una solución Multimedia ad hoc, como una alternativa al método convencional –manual– de transcripción y análisis de grabaciones. Los Documentos Multimedia manipulables con EDoM consisten de una combinación alternada de texto y fragmentos de audio o video, donde cada fragmento mantiene asociada una transcripción escrita por el evaluador. Por medio del marcado de texto así como la definición de actores, EDoM permite al evaluador transcribir sus grabaciones y generar semi-automáticamente bosquejos de sus instrumentos de evaluación. Palabras clave: Multimedia, medios digitales, XML, JDOM, JMF.

1 Introducción En México la mayor parte de la educación básica la proporciona el Estado a través de la SEP. Dentro de las políticas federales en materia educativa se agrupan una serie de programas orientados a mejorar educación. Algunos ejemplos de estos programas son el PEC [2][3] y el PRONAP [1]. Por medio de la evaluación de estos programas es posible medir su impacto en la educación al determinar ciertos indicadores que van desde el aprovechamiento por parte de los educandos, hasta el manejo adecuado de los recursos otorgados, entre otros. Cada entidad federativa delega la responsabilidad en una institución para efectuar la evaluación de los programas. En el caso de Tlaxcala la Dirección de Investigación y Evaluación Educativa (DIEE) se encarga de la evaluación de los programas en el período de un año. En la DIEE, el proceso de evaluación de los distintos programas se encuentra dialécticamente distribuido en etapas, donde el proceso va desde la

recolección de información, análisis e interpretación hasta la formulación de conclusiones. El personal de la DIEE realiza la mayor parte de sus actividades manualmente. Donde algunas de estas llegan a ser cuellos de botella debido a que resultan repetitivas, tediosas y consumidoras de tiempo. Dos de estas actividades son la transcripción textual y el análisis de grabaciones de audio o video. De manera conjunta estas actividades toman un tiempo aproximado de uno a dos meses. En respuesta al excesivo consumo de tiempo por parte de estas dos actividades, se propone el Diseño e implementación de una aplicación de software que mediante el uso de tecnologías multimedia asista al personal de la DIEE en la transcripción y análisis de grabaciones. Así mismo, se permitirá generar semiautomáticamente algunos instrumentos de evaluación sustentados por el análisis y la transcripción de grabaciones.

2 Estado del Arte Como se mencionó en la sección anterior el objetivo de la DIEE consiste en encontrar los elementos detonantes que repercuten en el bajo aprovechamiento estudiantil, a pesar de que las escuelas reciban patrocinios económicos (PEC) o sus maestros participen en cursos de actualización pedagógica (PRONAP). Por lo general las actividades de transcripción textual o análisis de grabaciones1 son individuales. Durante estas actividades el evaluador reproduce la cinta por un lapso breve (~5 a 10 seg.) mientras atentamente escucha las conversaciones (si es el caso observará el video); detiene la cinta, escribe en una hoja de papel y rebobina la cinta. Los pasos anteriores se repiten hasta transcribir completamente la grabación. Finalmente, el evaluador captura la transcripción en un procesador de textos Toda la información extraída de las filmaciones y audiograbaciones se ve plasmada en diferentes instrumentos de evaluación. En general, los instrumentos comprenden funciones de recopilación, organización, análisis e inferencia de información. Existe una relación muy estrecha entre instrumentos, donde documentos previos sirven como sustento para la elaboración de documentos posteriores. Un claro ejemplo son las transcripciones de práctica pedagógica que se plasman en matrices de análisis de la práctica pedagógica (véanse las figuras.1a y 1b). En la figura 1a se muestra la transcripción textual de una videograbación, donde el evaluador realiza la descripción del ambiente, transcribe los diálogos de los participantes y les antepone a estos una abreviatura para identificar el texto durante el análisis. La figura 1b aparece una matriz de análisis con una serie de categorías en las columnas de la primera fila. A continuación el evaluador copia fragmentos de texto de la transcripción (véase la figura 1a) que pertenece a alguna categoría para incluirlo posteriormente en la columna correspondiente en la matriz.

1

El análisis de las videograbaciones llega a darse el trabajo por parejas.

Categorias

Contenido sustentado por una Transcripción Textual

(a)

(b)

Fig.1. Dependencia entre instrumentos de evaluación.

3

Metodología utilizada

En esta sección se exponen características aplicadas durante el desarrollo de EDoM. Se introduce la definición de Documentos Multimedia. A continuación se aborda el subsistema para generar semi-automáticamente instrumentos de evaluación. Finalmente, se presenta el manejo de los fragmentos digitales por el subsistema Manejador de Documentos Multimedia. 3.1 Documentos Multimedia Se define, en el marco de este trabajo, a un Documento Multimedia como una combinación alternada de texto y fragmentos de audio o video como elementos primarios. Un documento multimedia sirve como instrumento intermedio entre las grabaciones y los instrumentos de evaluación elaborados a partir de la transcripción textual y el análisis de las grabaciones. El documento multimedia se almacena como un archivo XML definido por una DTD (Definición del Tipo de Documento) [4]. A continuación se muestra la declaración de los elementos raíz y secundarios de la DTD. … … … ... Los Fragmentos Medio Digital representan una pequeña sección de un archivo de audio o video y tiene una duración menor o igual a la grabación de origen. EDoM no

crea y ni almacena fragmentos como tal. Los fragmentos son virtuales y se mantienen referencias a un par de puntos específicos sobre el tiempo de un medio (apuntadores de inicio y fin). De esta forma se evita redundancia de información (véase la figura 2).

Fig. 2. Representaciones XML y visual de fragmentos de un medio digital.

Se denominan Actores a todos aquellos elementos (personas o cosas) utilizadas por el personal de la DIEE en la evaluación de grabaciones. Dentro del ambiente de EDoM el evaluador puede definirlos por medio de un Nombre, un Color y un Alias. El color ayuda visualmente a marcar el texto, el nombre identifica al actor y el alias regularmente consta de dos letras representativas para el evaluador (véase la figura 1a). Por otro lado, una Frase de Actor consiste en ligar un actor particular con un segmento de texto escrito por el usuario. Una frase de actor es simplemente texto marcado cuya representación dentro del documento multimedia es el de etiquetas XML. Así, el evaluador podrá fácilmente marcar o desmarcar texto, dependiendo de su criterio. 3.2 Generación de Instrumentos de Evaluación Conforme el evaluador construye un documento multimedia (combina texto y fragmentos, asocia la transcripción correspondiente a cada fragmento, define actores y marca texto) podrá generar la transcripción textual tentativa y una pseudo-matriz de análisis2. Esto lo puede hacer por medio del Generador Semi-automático de Instrumentos de Evaluación implementado dentro EDoM (véase la figura 3). Los elementos Actor y Frase Actor permiten a EDoM identificar y construir semiautomáticamente bocetos de los instrumentos de evaluación. 3.3 Subsistema Manejador de Documentos Multimedia La función principal de este subsistema es gestionar sobre los documentos multimedia creados y manipulados por el usuario. El Manejador de Documentos 2

Las Pseudo-matrices son un boceto de los instrumentos de evaluación denominados como Matrices de Análisis, expuestos en la sección Estado del Arte.

Multimedia, a través del API JDOM, realiza las tareas de almacenamiento y recuperación de los documentos multimedia en su formato XML. Por otro lado, el subsistema Manejador de Documentos Multimedia hace uso de Java Media Framework (JMF) [6] para la reproducción de los medios digitales y los fragmentos. Para reproducir un medio digital este subsistema crea una instancia del objeto MediaPlayer del JMF por medio de la URL del archivo de audio o video. Fragmentos digitales

Entrada

Generador Semiautomático de Instrumentos de Evaluación

Salida

Transcripción Textual

Documento Multimedia Pseudo-Matriz

Fig. 3. Entrada y salidas del Generador Semi-automático de Instrumentos de Evaluación.

JMF se encarga de dirigir el flujo de información hacia los dispositivos de salida correspondientes. Por otro lado, el subsistema además de crear un MediaPlayer, maneja los fragmentos por medio de los métodos setMediaTime(Time time) y setStopTime(Time time) y la información proporcionada por los apuntadores (véase la figura 2).

4

Resultados

Dentro del ambiente de EDoM el evaluador comúnmente comenzará su trabajo al crear o abrir un documento multimedia. Si es un documento nuevo, el evaluador deberá asociarle el medio digital deseado, crear tantos fragmentos como necesite y arrastrar los fragmentos dentro del documento. Al realizar doble clic sobre alguno de los fragmentos incrustados en el documento, emerge una ventana para transcripción textual (véase la figura 4). En esta ventana el evaluador podrá reproducir el fragmento c, redactar la transcripción asociada d, definir actores e y marcar texto fd. Al presionar los botones para generar la transcripción y la pseudo-matriz EDoM presentará dichos instrumentos al evaluador. En contra posición al método convencional de transcripción y análisis de grabaciones el uso de la aplicación de software EDoM resulta más sencillo para el evaluador.

5

Conclusiones

En este trabajo se propone la metodología característica de EDoM como una manera eficaz y eficiente de llevar a cabo un subconjunto de actividades convencionales realizadas en la DIEE. Se considera eficaz porque se reduce el equipo, material y esfuerzo necesario y eficiente por la reducción del tiempo invertido en las actividades relacionadas Como trabajo futuro es conveniente implementar un módulo robusto para la captura y conversión de formatos digitales. También es deseable el desarrollo de un módulo para el reconocimiento del lenguaje hablado

Fig. 4. Interfaces gráficas de EDoM. Interfaz principal y de transcripción de fragmentos.

Agradecimientos. Quisiéramos agradecer a la DIEE, a CONACYT y al gobierno del estado de Tlaxcala por el apoyo brindado al proyecto “Sistema de Cómputo para Evaluación y Seguimiento de la Educación Básica en el Estado de Tlaxcala” registrado bajo la clave FOMIX TLAX-2003-C02-12485, del cual forma parte este trabajo.

Referencias [1] Secretaria de Educación Pública. Programa nacional de actualización permanente (PRONAP). http://pronap.ilce.edu.mx, 2004. [2] Secretaria de Educación Pública. Programa Escuelas de Calidad (PEC). http://basica.sep.gob. mx/dgdgie/escuelasdecalidad/, 2004. [3] Jesús Álvarez Gutiérrez. Reforma educativa en México: El programa escuelas de calidad. REICE - Revista Electrónica Iberoamericana sobre Calidad, Eficacia y Cambio en Educación, 1(1), 2003. [4] Extensible markup language (xml) 1.0 (third edition). http://www.w3.org/TR/REC-xml/, 04 February 2004. [5] Ángel Israel Ortiz Cornejo, Heriberto Cuayáhuitl Portilla and Carlos Pérez Corona. An approach for facilitating development of web-based information systems. Advances in: Artificial Intelligence, Computing Science and Computer Engineering. Volumen 10:291– 301, 2004. [6] Sun Microsystems Inc., 2550 Garcia Avenue, Mountain View, California 94043-1100 U.S.A. Java™ Media Framework API Guide., November 1999.