Ir al contenido
Reallang

Cómo se decide una nota, paso a paso

Sophie Lindqvist

Examinadora oral, centro de idiomas universitario13 minPortland, OR

(Cómo funciona la puntuación)

Dos pasadas, tres ejecuciones y cada cita comprobada contra tu propia transcripción antes de que nada te llegue. Qué le está permitido decir al corrector y qué está obligado a dejar en blanco.

17 ago 20269 minutos

La primera pasada busca pruebas, no opiniones

La primera pasada lee tu transcripción y saca elementos: un número de turno, una cita y si suma o resta en un criterio. No asigna nada. Su único trabajo es encontrar las frases que tocan la rúbrica.

Separar esto del juicio es todo el diseño. Una sola pasada que lee una transcripción y produce un número no tiene ningún paso auditable: el razonamiento y la conclusión llegan juntos y ninguno se puede contrastar con el otro.

Cada cita se verifica en el servidor

Antes de que veas nada, el servidor comprueba que cada cita es una subcadena exacta de ese turno de tu transcripción, normalizando espacios y mayúsculas. Una cita que no lo es se reintenta una vez y luego se descarta.

Esta es la línea que importa: el modelo no puede parafrasearte hasta que le des la razón. Si una afirmación sobre tu respuesta no puede señalar tus palabras, no aparece. La proporción descartada se mide, porque una tasa de descarte que sube es la señal más temprana de que un corrector ha empezado a inventar.

La segunda pasada pone notas, tres veces

La segunda pasada ve solo las pruebas verificadas y los descriptores publicados, y asigna una nota por criterio. Se ejecuta tres veces y se queda la mediana: mismas pruebas, misma versión de rúbrica, mismo snapshot del modelo, y solo varía el muestreo.

El total ponderado se calcula después en código con los pesos que están en la página. No se le pide al modelo, porque a un modelo al que le pides aritmética sobre sus propios juicios te dará un número plausible en vez del correcto.

Lo que se niega a hacer

Un criterio sin pruebas vuelve como «pruebas insuficientes» y no como un tres, y el total se calcula sobre lo que se puntuó, no sobre lo que no. Una sesión corta deja más partes en blanco, y eso es lo correcto.

Al empezar una sesión se fijan cinco cosas —persona, escenario, rúbrica, corrector y snapshot del modelo— para que cualquier nota se pueda reproducir exactamente. Y la interfaz no dibuja entre dos sesiones un cambio menor que el ruido medido, porque un movimiento que no distingues de volver a tirar el dado no es progreso.

De quién trata

Sophie Lindqvist

Examinadora oral, centro de idiomas universitario

Sophie examina en un centro de idiomas universitario y pasa el resto de la semana enseñando, y se nota: es la examinadora que la gente desearía haber tenido. Sigue el formato al segundo y nunca ayuda, pero su expresión es abierta y su '¿por qué piensas eso?' suena a que de verdad quiere saber. Empieza con ella si el formato te asusta. Es la misma prueba con los bordes limados, el mismo silencio cuando paras, el mismo tiempo, las mismas preguntas, dichas por alguien que parece contento de que estés ahí. Cuando puedas llenar dos minutos con ella, pasa a James. Creció en Portland, pasó un año en Seúl y guarda una lista de las cosas más sorprendentes que los candidatos le han contado sobre sus ciudades.

Cuánto dura la conversación
13 min
Valorada por 0
Aún sin valorar
En este estante
1 guía
Sophie Lindqvist, examinadora oral, centro de idiomas universitario

Sigue leyendo

Tres más, y las personas de las que tratan