Mostrando entradas con la etiqueta tribunal. Mostrar todas las entradas
Mostrando entradas con la etiqueta tribunal. Mostrar todas las entradas

Corregir examen de oposiciones con ChatGPT

A estas alturas no hace falta explicar qué son las aplicaciones de IA o algunas en particular como ChatGPT.

Los alumnos las conocen y en general las usan más y mejor que sus profesores para generar trabajos que en la práctica son indetectables o en cualquier caso, aunque haya sospechas de que se haya usado una herramienta de este tipo, es muy difícil de probar.

La tecnología está ahí para todos, es decir, que nosotros también podemos usarla para corregir. Y puestos a corregir, ¿por qué no hacerlo con un examen de oposición? ¿imposible? ¿me creerías si te digo que ChatGPT ha calificado un examen con menos de medio punto de diferencia respecto a la nota de un tribunal formado como sabes por cinco personas y cuya media de sus calificaciones es la nota del examen?

Si te presentaste en la Región de Murcia en las oposiciones del 2021 para secundaria o las del 2022 para primaria, puedes consultar en tu carpeta ciudadana tu examen (más detalles de cómo hacerlo en esta entrada), transcribirlo para que sea legible en formato electrónico y hacer la prueba tú mismo (si te animas a hacer la prueba, por favor, comenta los resultados en los comentarios de esta entrada simplemente poniendo la nota del tribunal y la nota de ChatGPT).


Los prompts o instrucciones que he usado para que ChatGPT corrigiera el texto aplicando los criterios de valoración y sus porcentajes (en la convocatoria de 2021)  han sido:

Imagine you are the member of examining board for secondary education in the subject of English and have to assess an essay on a given topic.

For the first criteria of deep update scientific knowledge of the topic (30% in the total score) you must consider and assess the scientific, rigurous and deep knowledge of the topic; definitions, exemplifications or pertinent demonstrations, as well as pertinent bibliographical references.

For the the second criteria of structure (40% in the total score), full development and originality of the essay you must consider and assess if there is a relevant introduction which allows to contextualize the content of the topic, not limiting to advance the parts of the topic; coherent structure of the topic; correct development of all the parts of the topic; and a suitable and pertinent conclusion, not limiting to summarize the issues dealt with in the essay.

For the third and last criteria of presentation, order and writing (30% in the total score) you must consider and assess the fluency of expression, lexis and structure are adequate for the register or type of academic writing; and exposure of ideas with clarity and accuracy.

When calculating the final mark (from 0 to 10), detail the percentage and mark assigned to each criteria.

Este experimento hay que tomarlo con precaución (por eso sería estupendo tener algunas pruebas más de calificaciones reales de tribunal y las de ChatGPT) pero en cualquier caso este uso de ChatGPT tiene un enorme potencial para ayudar al opositor, no tanto en el hecho de obtener un feedback inmediato simbolizado principalmente en un valor numérico sino en la posibilidad de aplicar los consejos que nos proporcione, pedir específicamente que revise la ortografía o la gramática, el desarrollo equilibrado de cada una de las partes, que proporciones datos adicionales, las posibilidades son casi infinitas.

¡Hay algunas academias de preparación de oposiciones que están cobrando por hacer menos que ChatGPT!

Una precaución también como siempre en los usos de ChatGPT, hay que revisar los datos para comprobar que no se los está inventando (las conocidas alucinaciones) o que por mucho ChatGPT que sea, también puede estar equivocado: en una primera revisión de mi tema, me criticó que el Romanticismo no se gestó en Alemania sino en Inglaterra (tienes su corrección en detalle del tema en esta entrada):

However, there are some inaccuracies and inconsistencies in the presentation of facts, such as the assertion that Romanticism started in Germany before reaching England in the 18th century. Romanticism emerged primarily in England during the late 18th and early 19th centuries, with its roots in the Enlightenment era and reactions against it.

Cosa que le rebatí (con ayuda de Wikipedia):

I do not agree with some of your feedback and assessment since for most of the Western world, Romanticism was at its peak from approximately 1800 to 1850. The first Romantic ideas arose from an earlier German Counter-Enlightenment movement called Sturm und Drang (German: "Storm and Stress"). This movement directly criticized the Enlightenment's position that humans can fully comprehend the world through rationality alone, suggesting that intuition and emotion are key components of insight and understanding. Published in 1774, "The Sorrows of Young Werther" by Johann Wolfgang von Goethe began to shape the Romanticist movement and its ideals.

ChatGPT entonces me agradeció el comentario:  

Thank you for sharing your perspective. Indeed, the roots of Romanticism can be traced back to earlier movements such as Sturm und Drang in Germany, which critiqued the Enlightenment's emphasis on rationality and advocated for the importance of emotion and intuition in understanding the world. Additionally, works like Johann Wolfgang von Goethe's "The Sorrows of Young Werther" played a significant role in shaping Romantic ideals.

Considering this broader historical context, it's important to acknowledge that Romanticism did not emerge in isolation but was influenced by various intellectual and cultural developments preceding it. Therefore, I appreciate your clarification regarding the origins and timeline of Romanticism.

Y finalmente le pedí que volviera a evaluar el examen teniendo en cuenta esa información.



Si haces la prueba, además de en los comentarios, puedes dejar de forma anónima el resultado en este formulario con el que publicaré una estadística: https://forms.gle/Bi5TcLB2ZZWv8oRi7

Consejos para la defensa después de ser tribunal

Después de formar parte de un tribunal como presidente en las pasadas oposiciones comparto algunos consejos para la parte de la defensa o exposición oral que podrían ser útiles especialmente a los candidatos más novatos, la mayoría de lo comentado seguramente ya lo sabréis o diréis que es sentido común pero en el momento clave bastante candidatos obvian o descuidan estos pequeños hacks y tips que deben ser un must.

Empecemos: todo comunica y transmite un mensaje, por ello cuida el lenguaje corporal, controla el espacio y evita elementos que distraigan la atención del tribunal de tu exposición: desde bolsas de la compra, bolsos abiertos mostrando su interior, pulseras "políticas", tatuajes y demás). 

Necesitas que el tribunal te preste la máxima atención a lo que estés contando, que en ese momento es lo más importante en el mundo para ti y cualquier elemento que reste atención o simplemente no sume, evítalo o minimízalo.

Lo importante es "tu exposición", no tú. Si atraes la atención sobre tu apariencia, harás que también se juzgue aunque sea inconscientemente, para bien o para mal (un miembro puede ser más conservador y tradicional que otro).

Es un sesgo cognitivo debido a que el cerebro humano funciona así: si transmitimos dejadez, inseguridad o poca profesionalidad, los miembros evitarán la disonancia cognitiva intentando confirmar esos prejuicios iniciales (también funciona al revés, por eso es tan importante crear una buena impresión desde el primer momento en el que entras o empieces a hablar).

¿Cómo se evita esto? Pues como todo lo demás: practica, ensaya, repite, y luego hazlo otra vez (bonus tip: no apures el tiempo disponible, deja margen siempre de 5 minutos de sobra, irás más tranquilo sabiendo que lo vas a decir todo, el tribunal agradecerá que no agotes el tiempo y además evitarás el riesgo de que tenga que cortarte porque te has pasado de tiempo).

Dado que todo esto tiene mucho de teatrillo, acuérdate de la pistola de Chéjov: si muestras algo o lo mencionas, cabe la posibilidad de que te lo pidan para verlo o te pregunten sobre ello (ej. una rúbrica para la presentación oral). 

Algunos candidatos lo hacen muy bien dejándose algún aspecto para que precisamente se lo pregunten en el turno de preguntas o debate con el tribunal, ponen el cebo para que les pregunten sobre algo sobre lo que su respuesta está ya también preparada y ensayada. Todo forma parte del juego y desde luego, algunas personas no dejan nada, o casi nada, al azar, Y hacen muy bien ya que a diferencia de otros aspectos del proceso de oposición, estas cosas sí las pueden prever.

Relacionado con lo anterior, intenta saber antes cómo es el aula, la pizarra (¿grande o pequeña de departamento? ¿tiza o rotulador? ¿quién es quien en el tribunal?)

Por último, no discutas las reglas, el tribunal no las hace, solamente las aplica y desde luego ni tiene que justificarlas y mucho menos, modificarlas (ej. no preguntes si puedes introducir un móvil para usarlo de cronómetro en tu exposición).

Tampoco seas impertinente contestando que eso ya lo has dicho, limítate a responder lo mejor posible, ampliando la información que ya diste aportando nuevos datos o ejemplos (puedes empezar con "as I mentioned before" eso sí).


ENTRADAS RELACIONADAS:




Criterios de valoración para el tema escrito

 Aunque todavía falta para que se publiquen los criterios de valoración para la prueba del desarrollo del tema (normalmente se publica una semana antes de la prueba), traemos al blog los criterios de valoración publicados para la convocatoria de 2023  (los mismos que en la anterior convocatoria) para la Región de Murcia.

Los criterios de valoración establecidos para las dos pruebas (desarrollo del tema y ejercicio práctico) contemplarán, al menos, los siguientes epígrafes:

- Elementos de observación, criterios y/o indicadores de valoración.

- Puntuación máxima que se asigna a cada dimensión.

- Criterios de corrección ortográficos y discursivos de la lengua.

Con vistas a la acreditación de la competencia en comunicación lingüística por parte de los aspirantes, se tendrá en cuenta el correcto uso ortográfico, léxico y gramatical de la lengua en la que estén redactados los ejercicios (acentuación -en su caso-, signos de puntuación, vocabulario, 
morfología, sintaxis y estructura discursiva, repeticiones, tautologías y anacolutos).

Los miembros de los tribunales valorarán de forma negativa los siguientes errores:

• Faltas de ortografía, incluido el uso incorrecto de las tildes y el uso de abreviaturas indebidas.
• Incorrecciones sintácticas y discursivas que dificulten la comprensión del escrito (signos de puntuación usados de forma arbitraria o ausencia de los mismos; errores de concordancia; uso inadecuado de formas y tiempos verbales; uso incorrecto de preposiciones; uso inadecuado de marcadores discursivos).

En la calificación total de cada una de las partes de la primera prueba, así como en la segunda se detraerá la siguiente puntuación en función de los errores advertidos. Por cada falta se detraerán 0,5 puntos, excepto por las faltas referidas a abreviaturas indebidas. En este caso, por cada falta se detraerán 0, 25 puntos:

- Un error ortográfico (tipo b/v, g/j, ll/y) será considerado una falta.
- Tres tildes sin colocar o mal puestas tendrán el valor de una falta.
- Tres abreviaturas indebidas serán consideradas una falta.
- Tres usos arbitrarios de signos de puntuación o su ausencia se considerarán una falta.
- Tres usos inadecuados de formas y tiempos verbales tendrán el valor de una falta.
- Tres errores de concordancia serán considerados una falta.
- Tres usos incorrectos de preposiciones se considerarán una falta.
- Tres usos inadecuados de marcadores discursivos tendrán el valor de una falta.
- Tres repeticiones, tautologías o anacolutos serán considerados una falta.

Las faltas cometidas en palabras que se repiten se contabilizarán una sola vez.

El máximo total deducible por estos errores será de 3 puntos en cada ejercicio.

La corrección de la parte B del tema escrito se regirá por los criterios adjuntos en la tabla:



Con vistas a realizar mejor la práctica de esta parte realizando mock exams o simulacros siguiendo las recomendaciones de la anterior entrada (Cómo practicar el desarrollo del tema y ventajas de hacerlo) , podrías usar esta plantilla para la corrección de los mismos: 
https://docs.google.com/spreadsheets/d/1wTLo_wUw_Su7ifKvJHLNcZbAik-QHeOJRom4c8H59P0/edit?usp=sharing

Es una hoja de cálculo realizada con Drive donde sólo tienes que indicar la puntuación de cada indicador y te calculará la nota final teniendo en cuenta los pesos o porcentajes de cada criterio de valoración.


Clic para ampliar



Cambios para las próximas oposiciones de educación en Murcia

Hoy 29 de octubre acaba de anunciar la Consejería de Educación de la Región de Murcia los cambios que habrá en las próximas oposiciones: ✅ S...