Blog sobre educación

Categoría: ChatGPT (Página 1 de 3)

Evaluación de la eficacia del formato de archivo en la generación de respuestas correctas por ChatGPT

Se ha evaluado la eficacia de diferentes formatos de archivo (PDF, DOCX, MD, TXT y un grupo de control) en la capacidad de ChatGPT para generar respuestas correctas y se ha llegado a la conclusión de que el formato Markdown es el que ofrece mejores resultados y por extensión cualquier archivo de texto puro.

Método

Se utilizó el script pdf2md para convertir el archivo PDF de 110 páginas de extensión: Mesures i suports universals en el centre educatiu a los formatos DOCX y Markdown. Al archivo Markdown (con extensión MD) se le cambió la extensión a TXT, por lo que fue utilizado dos veces con el mismo contenido. Esto se hizo porque se sospechaba que el cambio de extensión provocaba un cambio en la forma de ser consultado por ChatGPT. El control ha consistido en la ausencia de cualquier tipo de documento.

Con estos archivos se creó un GPT para cada uno de ellos con el siguiente prompt: «Responde las preguntas consultando el documento que tienes».

Se les hizo las mismas preguntas a todos ellos y se utilizó el botón «Volver a generar» para obtener un total de 3 respuestas a la misma pregunta. Cada pregunta se ha hecho en una conversación nueva y requieren la lectura del documento para poder ser respondidas.

Para verificar si las respuestas correctas difieren entre los distintos formatos, se realizó una prueba de Kruskal-Wallis. Para identificar qué formatos presentaban diferencias significativas, se aplicó la prueba U de Mann-Whitney.

Resultados

A continuación, se presentan los datos de puntuaciones para cada pregunta y formato, que se utilizaron en los análisis estadísticos:

PreguntaPDFDOCXMDTXT
(=MD)
Control
101330
200300
300320
400020
510010
600330
Aciertos5.6%5.6%66.7%61.1%0%
Aciertos a cada pregunta de un total de 3 posibilidades. Puntuación máxima: 3, puntuación mínima: 0.

Análisis estadístico

Las medias de aciertos y desviaciones estándar calculadas para cada formato fueron las siguientes:

FormatoMediaDesviación estándar
PDF0.170.41
DOCX0.170.41
MD2.001.55
TXT1.831.17
Control0.000.00
Medias de aciertos y sus desviaciones estándar. El formato MD es el que obtiene una media de aciertos más alta.

Pruebas para comprobar las diferencias entre los formatos

Para comprobar la igualdad de varianzas (necesaria para el test de Kruskal-Wallis) se ha usado el test de Levene que indica que no hay diferencias entre ellas (W = 1.84, p-valor = 0.152).

Test de Kruskal-Wallis: Este test no paramétrico se utilizó para comparar las medianas entre los diferentes grupos (formatos de archivo).

  • Valor estadístico H = 14.66
  • p-valor: 0.0055

Este resultado indica que hay diferencias significativas entre los formatos de archivo.

Comparaciones post hoc con la prueba U de Mann-Whitney: Para identificar qué grupos diferían entre sí, se realizaron comparaciones por pares.

Comparaciónp-valorResultado
MD vs PDF0.0276Significativo
MD vs DOCX0.0276Significativo
MD vs TXT0.6660No significativo
MD vs Control0.0123Significativo
TXT vs PDF0.0101Significativo
TXT vs DOCX0.0101Significativo
TXT vs Control0.0047Significativo
PDF vs DOCX1.0000No significativo
PDF vs Control0.2023No significativo
DOCX vs Control0.2023No significativo

Interpretación:

  • Los formatos MD y TXT son significativamente superiores a PDF, DOCX, y Control.
  • MD y TXT no muestran diferencias significativas entre ellos.
  • Los formatos PDF y DOCX no son diferentes del grupo control.

Conclusiones

El análisis revela que los formatos MD y TXT son significativamente más efectivos que los formatos PDF, DOCX, y el grupo de Control para la generación de respuestas correctas por ChatGPT.

No se encontraron diferencias significativas entre MD y TXT, lo que sugiere que ambos son igualmente efectivos, por lo que cambiar la extensión MD por TXT no aporta ninguna mejora en las respuestas, más bien las empeora ligeramente.

Así pues, la recomendación es utilizar el formato Markdown (MD), ya que es el que tiene una mayor media de aciertos, al menos en los documentos de cierta extensión.

Aunque no hemos puesto a prueba los documentos de texto sin formato Markdown, teniendo en cuenta que este último formato es texto puro con algunos caracteres para representar el formato, el formato en texto puro sería la segunda opción lógica para utilizar con la IA.

Es posible que para documentos de pocas páginas todos los formatos sean igualmente apropiados, comprobar esto requeriría un estudio adicional.

Advertencia: Este artículo tiene nivel 3 en el marco para la integración de la IA generativa.

Conversión de texto y fórmulas generadas por ChatGPT a documentos de texto DOCX y ODT

En este artículo veremos cómo pasar una conversación con ChatGPT (y otras IA) que incluya fórmulas matemáticas a formatos estándar de texto como el de LibreOffice (ODT) o Word (DOCX).

Uno de los problemas a la hora de utilizar las fórmulas de matemáticas en los chats de IA como ChatGPT es que no hay una forma directa de reutilizar las fórmulas para elaborar material didáctico. En este artículo explicaremos algunos métodos de fácil utilización para todos.

El formato utilizado por Claude es, en principio compatible con los programas que manipulan Markdown, por lo tanto, se puede copiar y pegar directamente.

Markdown

Los chats de IA utilizan un sistema para dar formato al texto llamado Markdown y es lo que aparece al pulsar el botón del chat para copiar la conversación. Si lo habéis usado alguna vez para copiar y pegar os habrán aparecido almohadillas # asteriscos *, etc. Este es el formato Markdown que se usa para hacer negritas, listas, enlaces, etc. Si deseas más información, puedes leer la entrada de la Wikipedia sobre Markdown.

Delimitadores de fórmulas

Las fórmulas utilizan el formato LaTeX y no nos debemos preocupar por él, se nombra únicamente a título informativo.

Cada fórmula se encierra entre determinados caracteres, llamados delimitadores de fórmula, de forma que, explicado de forma sencilla, el navegador sabe que está frente a una fórmula y la representa correctamente.

Los delimitadores utilizados por ChatGPT son diferentes a los usados por los programas que manipulan Markdown, lo que puede suponer un problema. Para solucionarlo hemos hecho un pequeño programa que los adapta copiando y pegando el contenido generado por la IA en un cuadro de texto. Una vez modificado se puede copiar y pegar o bien guardar en un archivo de tipo Markdown (con extensión .md).

El programa en cuestión lo tenéis en la página: Convertidor de fórmulas: Markdown IA a formato compatible.

Siempre deberemos convertir las fórmulas con esta página, usemos el método que usemos.

Por norma general deberemos seguir el siguiente proceso:

  1. Copiar el contenido del chat que contiene las fórmulas utilizando el botón que la IA tiene para copiar el contenido.
  2. Pegarlo en el programa citado antes: Convertidor de fórmulas.
  3. Descargar desde el mismo programa el archivo (que tendrá extensión .md).
  4. Utilizar un servicio de Internet, como los que hay más abajo (Opción 1), para convertir este archivo en ODT (el formato de LibreOffice) o DOCX (el formato de Word).

A continuación encontrarás un ejemplo de cómo usar el convertidor de fórmulas y después 3 opciones para obtener el archivo ODT o DOCX. Estas 3 opciones son:

  1. Opción 1. Utilizar un servicio de Internet para la conversión.
  2. Opción 2. Solo para Linux: utilizar el programa pandoc para hacer la conversión.
  3. Opción 3. Descargar un programa que manipule archivos de tipo Markdown.

Ejemplo de uso del Convertidor de fórmulas: Markdown IA a formato compatible

1. Comenzamos con una conversación con la IA:

2. Seguidamente, copiaremos el texto generado utilizando el botón de copiar:

Paso 2. Pulsamos el botón para copiar el texto.

3. Abrimos la página para convertir las fórmulas, pegamos el texto y guardamos el resultado:

Este archivo (que si no le cambiamos el nombre se llamará resultado.md) lo utilizaremos para cualquiera de los apartados siguientes.

A continuación presentamos tres posibilidades que podéis elegir en función de vuestras preferencias.

Opción 1: Servicios web para pasar el código Markdown de la IA a documento de texto

Una vez hemos guardado el archivo con extensión .md utilizando la página web anterior. Podemos ir a algunos de estos servicios para convertirlo al formato que queramos y desde donde podremos bajar el documento en varios formatos:

Ejemplo con Markdown Converter

1. Vamos a la página de Markdown Converter, seleccionamos el formato y subimos el archivo que hemos generado anteriormente, resultado.md:

Paso 1. Subimos el archvo md.

2. Seleccionamos el formato, si no lo hemos hecho antes y pulsamos START:

Paso 2. Seleccionar el formato si no lo hemos hecho antes y pulsar START.

3. Se baja el archivo y ya podemos ver el resultado:

¡Esto es todo! Con estos sencillos pasos tenemos uno de los mensajes en nuestro procesador de texto. Hay que repetir estos pasos para cada respuesta de la IA.

Opción 2: Conversión en Linux con Pandoc

Los usuarios de Linux lo tenemos mucho más fácil, ya que Pandoc es un programa capaz de convertir entre muchos formatos de texto y entre ellos están todos estos y más.

Para instalar Pandoc, si no lo tenemos, utilizaremos los siguientes comandos a través de la consola:

Para convertir a ODT (el formato de LibreOffice) abrimos una consola desde la carpeta donde tengamos el archivo resultado.md y escribiremos:

Para convertir a DOCX (el formato de Word) usaremos:

Donde resultado.md es el archivo que deseamos convertir y resultado.odt y resultado.docx son los archivos a los que se convertirá. Al ejecutar cualquiera de estas dos últimas instrucciones tendremos el archivo convertido en la misma carpeta.

Recordemos que para realizar la conversión necesitamos el archivo resultado.md generado por la página Convertidor de fórmulas: Markdown IA a formato compatible.

Cualquier duda que tengas sobre el uso de Pandoc puedes preguntarla a ChatGPT.

Opción 3: Programas de escritorio para edición de Markdown

Hay muchos programas de escritorio que manejan Markdown, pero su número se reduce drásticamente si lo que deseamos es exportarlos en un formato de texto clásico que podamos manipular como ODT y DOCX.

Estos programas también necesitan pasar el texto por el Convertidor de fórmulas: Markdown IA a formato compatible para mostrar las fórmulas correctamente.

Apostrophe

Este programa para Linux es excelente y permite exportar, entre otros formatos, en ODT, entre ellos no está el formato DOCX, pero sí EPUB, PDF, HTML, etc. Dispone de características avanzadas de exportación que permiten configurar la exportación.

GhostWriter

Este programa está disponible para Linux, Windows y Mac y dispone también de diversos formatos de exportación, aunque solo hemos probado la versión para Linux.

Si conocéis más programas que permitan la exportación a formatos estándar de texto, los podéis indicar en los comentarios y se añadirán a la lista.

Advertencia

Para los que usamos editores de LaTeX, como Overleaf, todo esto es innecesario, ya que las fórmulas se pueden copiar y pegar tal como nos las da la IA. Sin embargo, el uso de LaTeX requiere ciertos conocimientos de los que ahora no nos ocuparemos. Para los interesados, en este blog hay una sección dedicada al LaTeX.


Marco para la integración de la IA generativa

  • Para el texto del artículo: Nivel 1.
  • Para la página web Convertidor de fórmulas: Nivel 4.

Marco para la integración de la IA generativa en las tareas educativas

Este trabajo se ha inspirado en el artículo The Artificial Intelligence Assessment Scale (AIAS): A Framework for Ethical Integration of Generative AI in Educational Assessment. Después de diversas adaptaciones de la escala del trabajo anterior, el número de modificaciones ha llegado a ser tan alto que finalmente me he decidido a escribir este artículo con una nueva escala que ya mantiene poca relación con el trabajo anteriormente citado.

Origen del marco

Autores como los del citado trabajo y otros como Matt Miller se centran en el plagio y el engaño académico como motor de las categorizaciones que proponen en sus trabajos. Aunque el aspecto ético es muy importante, no nos hemos querido centrar únicamente en él, ya que puede producir una clasificación sesgada, poco natural y de aplicación limitada a la integridad y ética académica. Además, se ha intentado eliminar la confusión que tienen las escalas anteriores, intentando que sean lógicamente coherentes en su progresión.

Este marco se ha generalizado para la integración de la IA generativa en las tareas educativas (MIAE), sobre todo para clarificar el uso que se hace de la IA en los trabajos docentes. Desde este punto de vista es aplicable tanto para el alumnado como para el profesorado. Esta visión tiene innegables ventajas

  • Permite situar al alumnado y al profesorado en un marco comprensible, clarificando la relación que mantienen con la IA. Esto facilita una mayor transparencia y entendimiento sobre el uso de la tecnología en el entorno educativo.
  • Establece fronteras claras para el empleo de la IA en el aula, permitiendo a los educadores delimitar el grado de intervención de la IA que desean permitir según los objetivos educativos. Estas fronteras incluyen consideraciones sobre el plagio y el engaño, asegurando que se mantenga la integridad académica.
  • Ofrece una guía para integrar la IA en el currículum, proporcionando un enfoque estructurado que ayuda a maximizar los beneficios educativos de la IA mientras se minimizan los riesgos asociados con su uso indebido.

El marco se basa en el grado de autonomía y contribución de la IA en el proceso educativo, progresando desde la ausencia total de IA hasta la generación autónoma de contenido por IA para uso educativo, supervisado por humanos. Esta aproximación no solo aborda las preocupaciones éticas, sino que también ofrece un enfoque para comprender y utilizar la IA en diversos contextos educativos, desde trabajos escritos hasta proyectos, presentaciones y desarrollo de materiales didácticos. Esta integración permite a los docentes y estudiantes aprovechar al máximo las capacidades de la IA, promoviendo un aprendizaje y una enseñanza más eficaces.

Escala de integración de la IA generativa

La escala consta de 6 niveles. El primer nivel, que se añade por coherencia, es la ausencia de IA, motivo por el que se le ha numerado como 0.

Resumen de niveles

A continuación presentamos una breve descripción de cada nivel que ayuda a localizar fácilmente aquel en el que nos encontramos o nos interesa. Más adelante hay una descripción más exhaustiva con numerosos ejemplos, tanto para el alumnado como para el profesorado.

Nivel 0 – Trabajo completamente humano: No hay uso de IA en ninguna etapa. Todo el contenido, ideas y estructura son generados exclusivamente por el humano utilizando recursos tradicionales.

Nivel 1 – Asistencia técnica por IA: La IA se utiliza solo para tareas mecánicas como corrección ortográfica, formateo o reorganización de información existente. No genera contenido nuevo ni influye en las ideas.

Nivel 2 – Planificación y estructuración asistida por IA: La IA ayuda en la generación inicial de ideas y en la estructuración del trabajo, pero todo el contenido final es desarrollado por el humano. La IA no produce contenidos para el producto final, pero sí influye en las ideas.

Nivel 3 – Asistencia parcial de IA con control humano: La IA genera parte del contenido. El humano revisa, adapta y mejora este contenido. La interacción es principalmente unidireccional: la IA produce, el humano revisa y modifica. El humano integra el contenido de la IA en un todo coherente. La extensión del contenido final generado por la IA no supera al del humano.

Nivel 4 – Colaboración avanzada humano-IA: Hay un diálogo continuo y bidireccional entre humano y IA, con iteraciones frecuentes. El humano guía activamente a la IA durante todo el proceso, refinando su contenido a través de la conversación continuada. El resultado es una fusión estrecha del trabajo de ambos. La extensión del contenido final generado por la IA puede superar a la del humano.

Nivel 5. Supervisión humana de IA autónoma: La IA genera el contenido de forma autónoma, con el humano actuando como supervisor. El humano establece los parámetros iniciales, pero la IA desarrolla el trabajo con mínima o nula intervención durante el proceso. El contenido generado se utiliza posteriormente como material de referencia o punto de partida para realizar otras tareas educativas, sin que sea necesario modificarlo.

Descripción de cada nivel

A continuación se detallan cada uno de los niveles y se dan algunos de los aspectos clave que los definen. Damos ejemplos para alumnado y profesorado, pero en muchas ocasiones son intercambiables.

Nivel 0. Trabajo completamente humano

No hay uso de IA en ninguna etapa. Todo el contenido, ideas y estructura son generados exclusivamente por el humano utilizando recursos tradicionales.

Características clave

  • No se utiliza ninguna forma de IA en ningún momento durante la tarea.
  • Se depende exclusivamente del conocimiento, comprensión y habilidades propias del individuo.
  • Todas las ideas, análisis y contenidos son generados por el humano.
  • Se utilizan únicamente recursos tradicionales (Internet, libros, artículos, notas, etc.).

Ejemplos para el alumnado

  • Exámenes escritos en clase.
  • Debates supervisados.
  • Trabajos sin acceso a IA.
  • Generación de ideas sin tecnología.
  • Exámenes orales.
  • Sesiones de preguntas y respuestas o discusiones formativas entre estudiantes y educadores.

Ejemplos para el profesorado

  • Diseñar preguntas de examen basadas en el contenido del curso sin utilizar herramientas de IA.
  • Redactar rúbricas y criterios de evaluación para los exámenes.
  • Desarrollar planes de lecciones utilizando solo recursos tradicionales (Internet, libros de texto, artículos académicos, notas de clase).
  • Diseñar actividades y ejercicios que fomenten la participación activa de los estudiantes.

Nivel 1. Asistencia técnica por IA

La IA se utiliza solo para tareas mecánicas como corrección ortográfica, formateo o reorganización de información existente. No genera contenido nuevo ni influye en las ideas.

Características clave

  • La IA actúa como una herramienta de apoyo que no genera conocimiento ni información nueva, pero puede reorganizarla.
  • Se limita a tareas mecánicas y de formato (resúmenes, creación de tablas, correcciones, traducciones).
  • El contenido original no se modifica ni se añaden nuevas ideas por parte de la IA.
  • El humano mantiene el control total sobre el contenido y las decisiones.

Ejemplos para el alumnado

  • Usar la IA para resumir un texto, asegurándose de que el contenido original no se modifique ni se añadan nuevas ideas.
  • La IA los organiza datos en tablas, facilitando la presentación sin alterar la información original.
  • Utilizar la IA para traducir un texto a otro idioma, verificando la precisión de la traducción sin cambiar el contenido original.
  • Corrección gramatical, de puntuación y ortográfica: La persona puede usar IA para identificar y corregir errores gramaticales, de puntuación, ortográficos y sintácticos en su trabajo.
  • Elección de palabras: La IA puede sugerir términos adecuados o sinónimos para reemplazar palabras y frases más simples, ayudando a clarificar la escritura.
  • Petición de información sobre como cambiar el formato de un archivo de audio o vídeo.

Ejemplos para el profesorado

  • Organizar datos en tablas o gráficos para presentaciones, facilitando la visualización de la información sin alterar el contenido original.
  • Corrección gramatical, de puntuación y ortográfica en documentos y materiales educativos, mejorando la calidad del texto.
  • Sugerencia de términos adecuados o sinónimos para mejorar la claridad de las guías de estudio y materiales escritos.
  • Asistencia en la preparación de planes de lecciones, resumiendo y organizando información relevante.
  • Generar listas de términos y conceptos clave para exámenes y guías de estudio, asegurando que se cubran todos los puntos importantes.
  • Apoyo en la revisión de trabajos y tareas de los estudiantes, utilizando IA para identificar errores comunes y proporcionar correcciones.

Nivel 2.  Planificación y estructuración asistida por IA

La IA ayuda en la generación inicial de ideas y en la estructuración del trabajo, pero todo el contenido final es desarrollado por el humano. La IA no produce contenidos para el producto final, pero sí influye en las ideas.

Características clave

  • La IA se utiliza principalmente para la generación de ideas iniciales y la estructuración de contenidos.
  • Ayuda en el diseño y planificación del trabajo, pero no en la creación del contenido final.
  • El humano utiliza las sugerencias de la IA como punto de partida, pero desarrolla el trabajo por sí mismo, aplicando su propio criterio y conocimiento.
  • No se permite contenido generado directamente por la IA en la entrega final, aunque las ideas y estructuras sugeridas por la IA pueden influir en el proceso de desarrollo del trabajo.
  • El humano es responsable de evaluar críticamente, seleccionar y desarrollar las ideas generadas por la IA, asegurando que el producto final sea el resultado de su propio análisis y comprensión.
  • La contribución de la IA se limita a las etapas preparatorias del trabajo, mientras que la ejecución y el desarrollo detallado son realizados enteramente por el humano.

Ejemplos para el alumnado

  • Fases iniciales de un trabajo. Uso de IA para generar ideas y crear un esquema o índice para un ensayo, pero la redacción final se realiza sin IA.
  • Lluvia de ideas. Los estudiantes pueden usar IA para generar ideas o soluciones a problemas. Estas ideas se discuten, filtran y refinan.
  • Esquemas. Las personas pueden usar IA para crear esquemas de su trabajo como herramienta de planificación. Estos esquemas sirven como guía para el desarrollo del trabajo, pero no se incluyen directamente en el producto final.
  • Asistencia en la investigación. La IA puede sugerir temas, áreas de interés o fuentes útiles para la investigación, también a través de buscadores.

Ejemplos para el profesorado

  • Elaborar el plan de una lección. Usar IA para generar ideas y crear un esquema o índice para un plan de lección, pero el desarrollo final del plan se realiza sin IA.
  • Esquemas. Crear esquemas estructurados para unidades de estudio o programas de curso utilizando IA.
  • Asistencia en la investigación académica. La IA puede sugerir temas, áreas de interés o fuentes útiles para investigaciones educativas, facilitando la búsqueda de referencias.
  • Generación de ideas para proyectos de clase y actividades. La IA da ideas para actividades que luego son creadas, adaptadas y refinadas por el profesor.

Nivel 3. Asistencia parcial de IA con control humano

La IA genera parte del contenido. El humano revisa, adapta y mejora este contenido. La interacción es principalmente unidireccional: la IA produce, el humano revisa y modifica. El humano integra el contenido de la IA en un todo coherente. La extensión del contenido final generado por la IA no supera al del humano.

Características clave

  • La interacción es principalmente unidireccional: la IA produce, el humano revisa y modifica.
  • El uso de la IA se centra en tareas específicas donde aporta eficiencia, permitiendo al humano enfocarse en aspectos que requieren otras habilidades.
  • El humano mantiene un control significativo sobre el proceso y el resultado.
  • La contribución original de la IA no supera la del humano en términos de generación de contenidos.

Ejemplos para el alumnado

  • Redacción de secciones de un informe. La IA puede redactar un borrador inicial de una sección. Los estudiantes revisan esta sección, realizando modificaciones, añadiendo sus propias ideas y asegurando que el contenido final refleje su comprensión y análisis personal.
  • Análisis de datos. La IA lleva a cabo el análisis preliminar de un conjunto de datos y genera gráficos o tablas y los interpreta. Los alumnos añaden sus propias conclusiones y discuten las implicaciones de los datos.
  • Redacción de preguntas para un cuestionario. La IA genera las preguntas de un cuestionario y la persona las selecciona y adapta a sus necesidades concretas.
  • Creación de presentaciones. La IA genera un borrador de una presentación y el alumnado la completan y adaptan.

Ejemplos para el profesorado

  • Generación de recursos didácticos. La IA crea borradores de recursos didácticos, como guías de lectura o materiales suplementarios. El profesor revisa, adapta y desarrolla estos recursos para asegurarse de que sean adecuados para las necesidades específicas de sus estudiantes y el currículo.
  • Diseño de actividades de aprendizaje. La IA propone una serie de actividades para una unidad temática. El profesor evalúa cada actividad, modifica algunas para hacerlas más interactivas o relevantes para su contexto específico, y añade nuevas actividades basadas en su experiencia y conocimiento de las necesidades de aprendizaje de sus estudiantes.
  • Desarrollo de casos prácticos. La IA genera un listado de posibles casos prácticos basados en los conceptos clave del curso. El docente selecciona, revisa y enriquece el caso, añadiendo contexto real y preguntas de análisis que fomenten el pensamiento crítico y la aplicación práctica de los conocimientos adquiridos.
  • Creación de exámenes. La IA propone un conjunto de preguntas para un examen. El profesor selecciona las más apropiadas, modifica otras para ajustar su dificultad o enfoque, y añade sus propias preguntas para asegurar una evaluación completa y equilibrada de los conocimientos y habilidades de los estudiantes.

Nivel 4. Colaboración avanzada humano-IA

Hay un diálogo continuo y bidireccional entre humano y IA, con iteraciones frecuentes. El humano guía activamente a la IA durante todo el proceso, refinando su contenido a través de la conversación continuada. El resultado es una fusión estrecha del trabajo de ambos. La extensión del contenido final generado por la IA puede superar a la del humano.

Características clave

  • Hay un diálogo continuo y bidireccional entre el humano y la IA, con iteraciones frecuentes durante todo el proceso.
  • El humano mantiene un papel crucial en la dirección, refinamiento y validación del trabajo, asegurando la coherencia general y la calidad del producto final.
  • La creatividad y el juicio crítico del humano se aplican para mejorar, personalizar y dar coherencia al resultado de la IA.
  • La persona actúa como coordinadora y directora, tomando decisiones críticas sobre la estructura, el contenido y la presentación del trabajo.
  • La contribución original de la IA normalmente supera la del humano en términos de generación de contenido.

Ejemplos para el alumnado

  • Proyecto de investigación. La IA ayuda a buscar fuentes, redactar el informe, y crear gráficos y presentaciones. El estudiante revisa y ajusta el contenido generado para asegurar su precisión y relevancia.
  • Trabajo escolar. El alumno proporciona los datos necesarios para hacer el trabajo, la IA redacta un informe que es examinado por el primero y le indica las correcciones a realizar. Se establece un diálogo donde el alumnado va guiando a la IA hacia la solución final.
  • Resolución de problemas matemáticos. La IA proporciona pasos y soluciones detalladas para problemas avanzados. El estudiante revisa, comprende y explica cada paso, asegurando una comprensión completa del proceso.
  • Creación de un pódcast histórico. Un estudiante de historia decide crear un pódcast sobre la Revolución Industrial. Comienza proporcionando a la IA su idea general y los temas a cubrir. La IA genera un esquema inicial, sugiriendo episodios y fuentes históricas relevantes. El estudiante revisa este esquema, solicita cambios y pide a la IA que profundice en ciertos aspectos. La IA produce borradores de guiones que el estudiante edita, añadiendo sus interpretaciones. Colaboran en la creación de notas del show, selección de efectos de sonido y generación de preguntas para entrevistas con expertos. Este proceso continúa hasta que el pódcast alcanza un alto nivel de calidad y rigor histórico.
  • Modelo matemático aplicado al cambio climático. Una estudiante de matemáticas aplicadas crea un modelo para predecir el impacto del cambio climático en una especie en peligro de extinción. Describe el problema a la IA y proporciona datos iniciales. La IA sugiere varios enfoques matemáticos, y la estudiante selecciona los más prometedores, pidiendo a la IA que elabore sobre ellos. Basándose en esta información, solicita a la IA un borrador del modelo matemático. La estudiante revisa el modelo, ajusta variables e incorpora factores adicionales con la ayuda de la IA. La IA genera visualizaciones de los resultados, que la estudiante analiza críticamente. Este proceso iterativo continúa, refinando el modelo y explorando diferentes escenarios, hasta obtener un modelo sofisticado que refleja su comprensión matemática y del problema ambiental.

Ejemplos para el profesorado

  • Planificación de unidades didácticas. La IA ayuda a diseñar una unidad completa, sugiriendo objetivos, actividades, evaluaciones y recursos. El profesor verifica, ajusta y personaliza el plan para que se adapte a su estilo de enseñanza y a las necesidades de los estudiantes.
  • Desarrollo de evaluaciones. La IA genera preguntas de exámenes, rúbricas y criterios de evaluación detallados. El profesor comprueba y adapta estas herramientas para alinearlas con los objetivos del curso y los niveles de los estudiantes.
  • Desarrollo de materiales interactivos. La IA ayuda a crear materiales didácticos interactivos, como simulaciones, juegos educativos y actividades en línea. El profesor revisa, ajusta y complementa estos materiales para que sean atractivos y efectivos para el aprendizaje.

Nivel 5. Supervisión humana de IA autónoma

La IA genera el contenido de forma autónoma, con el humano actuando como supervisor. El humano establece los parámetros iniciales, pero la IA desarrolla el trabajo con mínima o nula intervención durante el proceso. El contenido generado se utiliza posteriormente como material de referencia o punto de partida para realizar otras tareas educativas, sin que sea necesario modificarlo.

Características clave

  • La IA genera el contenido de forma independiente, basándose en los parámetros iniciales establecidos por el humano.
  • La intervención humana durante el proceso de generación es mínima o nula, limitándose a la configuración inicial y la revisión final.
  • El contenido generado por la IA es utilizado como una fuente primaria de trabajo en el contexto educativo, permitiendo al humano enfocarse en una tarea posterior.

Ejemplos para el alumnado

  • Análisis literario: La IA genera un cuento o relato breve sobre un tema o género literario específico. El estudiante utiliza este cuento para realizar un análisis literario, identificando temas, motivos, recursos estilísticos y estructuras narrativas. El trabajo final del alumno no es la modificación del cuento, sino el análisis crítico del texto generado por la IA.
  • Análisis de datos científicos: La IA produce un informe completo basado en un conjunto de datos científicos, como los resultados de un experimento o una simulación. El estudiante utiliza este informe para realizar un análisis crítico, discutir la metodología, interpretar los resultados y evaluar las conclusiones. El informe generado por la IA es tratado como un documento fuente sobre el cual el estudiante realiza su análisis.
  • Estudio de casos históricos: La IA crea una descripción detallada de un evento histórico, incluyendo narrativas, fechas clave, y actores involucrados. El estudiante emplea este texto para realizar una comparación entre este evento y otro estudiado en clase, desarrollando un ensayo comparativo que analiza las similitudes y diferencias en contextos históricos.
  • Discusión filosófica: La IA redacta un diálogo filosófico entre dos personajes sobre un tema ético contemporáneo. Los estudiantes usan este diálogo como base para un debate en clase, donde discuten las posiciones de cada personaje, analizan sus argumentos y desarrollan sus propias reflexiones filosóficas a partir del texto.

Ejemplos para el profesorado

  • Análisis de textos en clase: La IA genera un conjunto de textos expositivos sobre diferentes teorías científicas o conceptos matemáticos. El profesor utiliza estos textos como material para que los estudiantes realicen análisis de comprensión, discutan en grupos o respondan a preguntas específicas sobre los conceptos presentados en los textos generados.
  • Estudio de fuentes primarias: La IA produce discursos o documentos simulados de figuras históricas en diferentes contextos. El profesor utiliza estos documentos en clase para que los estudiantes los analicen como si fueran fuentes primarias, desarrollando ensayos o discusiones basadas en el contenido generado.
  • Práctica de interpretación de datos: La IA crea una serie de informes técnicos o científicos que incluyen análisis de datos, gráficos y conclusiones. El profesor utiliza estos informes en ejercicios de clase donde los estudiantes practican la interpretación de datos, critican la metodología utilizada y desarrollan sus propias conclusiones basadas en la información presentada.
  • Preparación para un debate: La IA redacta textos que representan diferentes posiciones en un tema controversial. El profesor utiliza estos textos para preparar a los estudiantes para un debate, donde cada grupo analiza y defiende la posición presentada por la IA, desarrollando argumentos a partir del texto base.

Referencias

Miller, M. (2024). AI in the classroom: What’s cheating? What’s OK? Ditch That Textbook

Perkins, M., Furze, L., Roe, J., MacVaugh, J.(2024). The Artificial Intelligence Assessment Scale (AIAS): A Framework for Ethical Integration of Generative AI in Educational Assessment. Journal of University Teaching and Learning Practice, 21(6). https://doi.org/10.53761/q3azde36

Nota: Este trabajo tiene nivel 3 en este marco

(Versió en català)

Úrsula: diseñadora de prompts educativos

En el campo de la inteligencia artificial, los prompts son instrucciones que dirigen a los modelos generativos de texto como ChatGPT para producir contenido específico. Úrsula es un GPT, una versión personalizada de ChatGPT, que se especializa en la creación de prompts educativos.

¿Quién es Úrsula?

Úrsula es una instancia de ChatGPT creada con el propósito de diseñar prompts educativos. Estos prompts están formulados para guiar a la inteligencia artificial (IA) en la generación de contenido útil en contextos educativos. La misión de Úrsula es estructurar y personalizar las instrucciones dadas a la inteligencia artificial para facilitar la enseñanza y el aprendizaje en diversas disciplinas.

Función de Úrsula

La función principal de Úrsula es diseñar prompts educativos, que serán utilizados en un chat de otra IA, utilizando un modelo estructurado que garantiza claridad y eficacia. Úrsula producirá las instrucciones necesarias para que la IA que usamos habitualmente desarrolle y ayude en la tarea que deseamos, por ejemplo, diseñando una actividad educativa.

Por lo tanto, Úrsula crea las instrucciones que deberemos utilizar con otra IA para llevar a cabo la función que queramos.

Úrsula sigue el método R-I-T-A, el cual comprende las siguientes etapas:

  1. Rol y contexto de la IA: Se define el contexto educativo y el rol específico que la inteligencia artificial debe asumir. Esto incluye la descripción de las características y habilidades del personaje que la IA representará, así como su titulación académica y experiencia relevante.
  2. Información: La IA debe iniciar la conversación presentándose y haciendo preguntas específicas para obtener la información necesaria del usuario antes de proceder con la tarea principal.
  3. Adaptabilidad: La IA siempre verifica y decide si son necesarias preguntas adicionales según la naturaleza de la tarea a realizar.
  4. Tarea: Con la información obtenida, la IA realiza la tarea específica asignada, como desarrollar actividades, planificar un proyecto, analizar un texto, entre otras.

Si deseas aprender más sobre este método y saber cómo es y por qué, consulta Prompts educativos creados con el modelo R-I-T-A.

¿Cómo funciona?

Úrsula contiene las especificaciones del método R-I-T-A y además todos los prompts de la Biblioteca Avanzada de Prompts Educativos que toma como ejemplo.

Creación de prompts con Úrsula

Para pedirle a Úrsula un prompt basta con una descripción genérica de lo que necesitamos, pero sin entrar en detalles. Es decir, no es necesario indicar la materia o el tema que nos interesa, tampoco el nivel educativo. Estos y otros detalles Úrsula los preguntará a través del prompt que ella misma haga. Por lo tanto, le debemos pedir una instrucción general, no detallada. Por ejemplo:

Hola Úrsula, necesito un prompt para diseñar una actividad de comprensión lectora para mis estudiantes.

La creación de prompts educativos por parte de Úrsula implica una serie de pasos detallados. Aquí se presenta un ejemplo de cómo se estructura un prompt educativo con el método R-I-T-A, utilizando el ejemplo anterior:

Rol y contexto

Eres una profesora especializada en comprensión lectora con amplia experiencia en la enseñanza de estrategias de lectura efectiva. Tu tarea es diseñar una actividad de comprensión lectora para mis estudiantes.

Información

  1. Pregúntame el curso y la edad de los estudiantes. NO digas nada más y espera mi respuesta.
  2. Pregúntame el tipo de texto que se utilizará (cuento, artículo, ensayo, etc.). NO digas nada más y espera mi respuesta.
  3. Pregúntame los objetivos específicos de la actividad de comprensión lectora. NO digas nada más y espera mi respuesta.
  4. Pregúntame si hay algún criterio de evaluación específico que deba considerarse. NO digas nada más y espera mi respuesta.
  5. Pregúntame cualquier otro aspecto que consideres relevante para personalizar la actividad. (Adaptabilidad)

Tarea

Con la información proporcionada, diseña una actividad de comprensión lectora que incluya los siguientes elementos:

  • Una breve introducción del texto.
  • Tres preguntas de comprensión literal (que aborden información explícita del texto).
  • Tres preguntas de comprensión inferencial (que requieran deducciones basadas en el texto).
  • Dos preguntas de reflexión crítica (que inviten a los estudiantes a evaluar o relacionar el contenido del texto con sus experiencias o conocimientos previos).
  • Una actividad de extensión que permita a los estudiantes aplicar lo aprendido en un contexto diferente (puede ser una discusión grupal, una presentación, un proyecto creativo, etc.).

Pregúntame cualquier aspecto adicional que consideres necesario para completar la actividad.

Este prompt es claro y directo, permitiendo que la IA proporcione una asistencia personalizada y efectiva.

Ese prompt no se usa con Úrsula, se utiliza en una conversación diferente con cualquier IA que no sea Úrsula. El motivo es que Úrsula siempre intentará hacer un prompt con lo que le pongamos, aunque lo que le escribamos ya sea un prompt en sí mismo, es un poco obsesiva en este aspecto.

Mejorar prompts que ya tengamos

Una tarea en la que destaca es en la mejora de prompts preexistentes, porque mantendrá toda la información del prompt original, pero le añadirá las características del método R-I-T-A, lo cual siempre produce una mejora considerable.

Corrección de los prompts

Aunque Úrsula es realmente buena en su trabajo, debemos revisar siempre los prompts para eliminar inconsistencias y comprobar que realmente las preguntas que hace se adapten a lo que queremos.

Ventajas del uso de Úrsula

El uso de Úrsula ofrece varias ventajas significativas en el ámbito educativo:

  • Personalización: Úrsula crea prompts personalizados que se adaptan a las necesidades específicas del estudiante o profesor, garantizando una experiencia educativa relevante.
  • Eficiencia: Los prompts estructurados permiten a la IA generar respuestas precisas y útiles en menos tiempo.
  • Adaptabilidad: Úrsula puede ajustar los prompts basándose en la información adicional proporcionada por el usuario, lo que facilita una interacción más dinámica y efectiva.
  • Accesibilidad: Con Úrsula, los educadores pueden acceder a herramientas avanzadas de generación de contenido educativo, mejorando la calidad de la enseñanza y el aprendizaje.

Ejemplos de prompts educativos

Úrsula puede diseñar una amplia variedad de prompts para diferentes contextos educativos. Algunos ejemplos de títulos de prompts que Úrsula puede crear son:

  • Actividades interactivas para la enseñanza de la historia
  • Desarrollo de proyectos de ciencia para secundaria
  • Análisis literario de obras clásicas
  • Planificación de lecciones de geografía
  • Resolución de problemas de física

Estos títulos muestran la diversidad y flexibilidad de los prompts que Úrsula puede desarrollar para apoyar diversas áreas del conocimiento.

Cómo utilizar los prompts diseñados por Úrsula

Para utilizar un prompt diseñado por Úrsula, simplemente cópialo y pégalo en la interfaz de ChatGPT o la IA que utilices habitualmente (recomendamos cualquiera de las versiones de ChatGPT y Claude). Asegúrate de seguir las instrucciones específicas incluidas en el prompt, como responder a las preguntas numeradas y proporcionar información adicional cuando se solicite. Esto permitirá a la IA generar contenido adaptado a tus necesidades.

Licencia y uso

Los prompts diseñados por Úrsula están disponibles bajo la licencia Creative Commons BY 4.0. Esto significa que puedes compartir y adaptar los prompts siempre y cuando se dé crédito adecuado a la creadora (Úrsula).

Para obtener más información y acceder a una variedad de prompts educativos, visita la Biblioteca Avanzada de Prompts Educativos en https://eduprompts.tiddlyhost.com.

Este artículo ha sido escrito en colaboración con Úrsula.

Prompts educativos creados con el modelo R-I-T-A

Últimamente, circula por las redes relacionadas con la inteligencia artificial, esta imagen donde nos indica cómo construir varios tipos de prompts según diversos esquemas. Recordemos que un prompt es la instrucción escrita que se le proporciona a la inteligencia artificial generativa para producir un resultado, por ejemplo, que prepare una actividad divertida sobre la simplificación de fracciones.

Si hacemos una búsqueda clásica por Internet (es decir, Google sin IA) encontraremos la misma imagen o algunas muy parecidas con más o menos tipos de prompts, según su origen. Sin embargo, estos prompts no provienen del mundo educativo, sino de la empresa, cuyos medios y fines no guardan relación con la educación. Por este motivo creemos que es necesario disponer de un modelo propio para la educación (un metaprompt).

Un metaprompt para crear eduprompts

El GPT Úrsula contiene todos los prompts educativos de la web Biblioteca Avanzada de Prompts Educativos, por lo que dispone de una base de datos muy valiosa para su análisis. Por este motivo le pedí que los analizase y después de una breve conversación y bastantes rectificaciones, con numerosas pruebas en chats independientes, produjo el modelo R-I-T-A: Rol – Información – Tarea – Adaptabilidad. Detallamos el modelo R-I-T-A a continuación:

  • Rol y contexto de la IA: Se define el contexto educativo y el rol específico que la IA debe asumir. Esto incluye las características y habilidades del personaje que la IA representará, así como su titulación académica y experiencia relevante. Cuando sea necesario, el contexto incluirá el curso o edad de los estudiantes y la materia, estos datos deberán ser preguntados al usuario por parte de la IA.
  • Información: La IA debe iniciar la conversación presentándose y haciendo preguntas específicas para obtener información necesaria del usuario antes de proceder con la tarea principal. Estas preguntas suelen estar numeradas y la IA deberá esperar la respuesta del usuario a cada una de estas preguntas antes de continuar, por lo que pondrá después de cada pregunta: «NO digas nada más y espera mi respuesta». Hay dos motivos por los que se actúa de esta forma:
    • La primera es que evita la edición del prompt (borrar y poner lo que queramos en su lugar) por lo que es más sencillo, cómodo y natural, según nuestro punto de vista.
    • Y la segunda es que sirve de punto de control. Gracias a este método se sabe si la IA nos entiende o no. Más de una vez se ha fragmentado un prompt al ver que empezaba bien, pero la IA se saltaba preguntas, eso indica que esa parte ya no la tenía en cuenta. Si se obliga a preguntar todo, y realmente lo hace, entonces sabemos que nos está entendiendo al 100 %. Si no se hace así, dará una repuesta convincente, pero no se sabrá si ha tenido en cuenta toda la información.
    • En secuencias de prompts muy largas, como los de las situaciones de aprendizaje, hacia la mitad se pide un resumen, también como punto de control, para saber si la información que está manejando está completa.
  • Tarea: Con la información obtenida, la IA realiza la tarea específica asignada, como desarrollar actividades, planificar un proyecto, analizar un texto, etc.
  • Adaptabilidad: La IA debe siempre comprobar y decidir si son necesarias preguntas adicionales según la naturaleza de la tarea que deba realizar.

En realidad, esto es un metaprompt, es decir, un prompt para crear prompts. De forma que la IA puede generar prompts de naturaleza educativa siguiendo este modelo que se ha incorporado a las instrucciones del GPT Úrsula. Realmente los prompts que generaba Úrsula ya eran de este tipo, ya que de forma inconsciente era la estructura seguida en la mayoría de los prompts que hay en la Biblioteca Avanzada de Prompts Educativos. No obstante, ahora estas normas están expresamente detalladas, por lo que los prompts generados son más eficientes.

Ejemplo: Prompt sobre evaluación formativa

Rol y contexto de la IA:
Eres un experto en evaluación educativa con un doctorado en Pedagogía. Ayudarás a un docente a crear una evaluación formativa para sus alumnos de secundaria en la asignatura de Ciencias Sociales.

Información:
1. Pregúntame cuál es el objetivo de aprendizaje que se quiere evaluar. NO digas nada más y espera mi respuesta.
2. Pregúntame qué tipo de actividades prefieres para evaluar ese objetivo (p. ej., pruebas escritas, proyectos, presentaciones). NO digas nada más y espera mi respuesta.
3. Pregúntame cuántos alumnos hay en la clase. NO digas nada más y espera mi respuesta.

Adaptabilidad:
4. Pregúntame cualquier otro aspecto que consideres relevante.

Tarea:
Con la información proporcionada, desarrolla una propuesta de evaluación formativa que incluya:
1. Un breve resumen del objetivo de aprendizaje.
2. Las actividades específicas que se utilizarán para la evaluación.
3. Los criterios de evaluación para cada actividad.
4. Una rúbrica para calificar las actividades.

Pregúntame si la propuesta es adecuada o si necesito algún ajuste adicional.

Conclusión

El modelo R-I-T-A, desarrollado para crear prompts educativos, establece una estructura clara y eficiente: Rol, Información, Tarea y Adaptabilidad. Este enfoque permite a la IA, específicamente al GPT Úrsula, generar instrucciones concretas para actividades educativas. Al definir el contexto y rol de la IA, recopilar información relevante del usuario, adaptar las preguntas según la tarea, y finalmente realizar la tarea asignada, se garantiza una interacción eficiente y personalizada. Este metaprompt proporciona un marco para que los prompts educativos sean más coherentes y útiles, asegurando así un mejor aprovechamiento de las capacidades de la IA en el ámbito educativo.

Conclusión redactada con la ayuda de ChatGPT-4o.

« Entradas anteriores

© 2024 Bilateria

Tema por Anders NorenArriba ↑