Utilización del MCER para evaluar

Kit de Herramientas

Después de que apareciera la versión final del MCER en 2001, la División de Política Lingüística alentó el desarrollo de recursos adicionales para respaldar los usos apropiados del MCER en diferentes contextos de aprendizaje, enseñanza y evaluación. Estos recursos se conocen como el "kit de herramientas" del MCER.

Kit de Herramientas

Ejemplos de descriptores

Actividades

Descriptor A2 de la Escala Global

Lenguaje

Condiciones

Límites

Ejemplos

• Es capaz de comprender frases y expresiones de uso frecuente relacionadas con áreas de experiencia que le son especialmente relevantes (información básica sobre sí mismo y su familia, compras, lugares de interés, ocupaciones, etc.)

• Sabe comunicarse a la hora de llevar a cabo tareas simples y cotidianas que no requieran más que intercambios sencillos y directos de información sobre cuestiones que le son conocidas o habituales.

• Sabe describir en términos sencillos aspectos de su pasado y su entorno así como cuestiones relacionadas con sus necesidades inmediatas.

Temas

Procesos

Estrategias

Ejemplo de categorías sobre interacción total hablada

Omitir

• Comprensión de un interlocutor hablante nativo
• Conversación
• Discusión informal
• Discusión formal (reuniones)
• Cooperación orientada a objetivos
• Obtención de bienes y servicios
• Intercambio de información
• Entrevistar y ser entrevistado

¿Qué categorías son relevantes al evaluar el desempeño de un candidato?

¿Qué categorías no forman parte de las actividades de un agente?

Cambiar

Cambiar

Cooperación orientada a objetivos

Puede explicar por qué algo es un problema, discutir qué hacer a continuación, comparar y contrastar alternativas.

Puede explicar el curso de acción para solucionar el problema planteado por un cilente, ayudándole a comparar y contrastar alternativas.

Puede dar breves comentarios sobre las opiniones de los demás.

Puede utilizar frases de empatía ante las opiniones de un cliente.

Agregar

Los descriptores no incluyen ninguna referencia a deletrear o leer números adecuadamente para proporcionar, aclarar o confirmar información. Sin embargo, estas actividades y el uso adecuado del lenguaje para lograrlas es esencial en el trabajo diario de un agente.

Agregar

Consideraciones

Consideraciones

• Validez: Lo que afirmamos es cierto.

• Confiabilidad: Hay consistencia en los resultados.

• Ética y equidad: Existe consciencia del impacto que los resultados tienen y brinda la misma oportunidad a todos los evaluados.

• Planificación

Proceso

1

Planeación, diseño, consideraciones prácticas, especficaciones

2

Proceso

Redacción de preguntas y tareas a realizar, producción de materiales, edición, prueba piloto y revisión

5

3

Monitoreo de rutina y revisión periódica del examen

Aplicación (lugares, horarios, fechas, materiales, evaluadores)

4

Evaluación (calificar) y resultados

Rating

“Usaremos los términos rating y raters aquí para referirnos a la acción de evaluar en la que es necesario el ejercicio de un juicio entrenado, en un grado mucho mayor que cuando se realiza de forma más administrativa. Cuando se utiliza el juicio, el proveedor del examen no puede prescribir claramente una sola "respuesta correcta" antes de evaluar. Por esta razón, hay un mayor margen para el desacuerdo entre juicios que en otros tipos de evaluación y, por lo tanto, un mayor peligro de inconsistencia, entre los evaluadores o en el trabajo de un evaluador individual. Se puede utilizar una combinación de capacitación, monitoreo y retroalimentación correctiva para garantizar que la calificación sea precisa y confiable".

Manual para el desarrollo de exámenes y pruebas de idiomas (Para usar con el MCER)

Producido por ALTE en nombre de la División de Política Lingüística, Consejo de Europa

El examen en Telvista

Evaluación Telvista

• Se basa en una combinación de descriptores que toman en cuenta sólo el aspecto de producción oral y con enfoque en competencias lingüísticas.

• No existe una rúbrica estandarizada y el material no está adaptado a las necesidades de las cuentas.

• No existe un examen estandarizado (un set de preguntas y tareas)

• Los evaluadores no tienen el mismo nivel de dominio del idioma. El manual enfatiza que si bien no es necesario tener certificaciones en enseñanza y/o evaluación, sí es esencial un dominio avanzado para poder utilizar un criterio entrenado.

Recomendaciones

Recomendaciones

• Establecer una evidente necesidad de la prueba junto con los principales interesados y dejar en claro que la prueba abordará principalmente las necesidades de lenguaje dentro de un dominio específico.
• Recopilación de datos: según el dominio, probablemente sea necesario observar, entrevistar, recopilar pruebas, etc.
• Durante la recopilación de datos, se deben obtener suficientes materiales y recursos de referencia.
• Proporcionar especificaciones claras, que incluyen análisis de necesidades funcionales.
• Identificar las tareas centrales, vocabulario, funciones y gramática para la prueba.
• Relacionar (o no) la prueba con el MCER u otro marco o estándar externo, según el contexto.
• Encontrar e involucrar expertos en temas y contextos adecuados para trabajar en colaboración con todo el proceso de desarrollo de la prueba.
• Establecer un diálogo efectivo con las partes interesadas en cada etapa.