Reto21Dias IA generativa. Resumen día 3

En el tercer día de mi desafío con la inteligencia artificial generativa, he pasado de la lectura a la acción, y he comenzado a experimentar con la creación de bots personales a través de la plataforma POE. Mi objetivo es crear soluciones que respondan a los dos casos de uso específicos que me planteé.

La creación de estos bots no requiere programación en el sentido tradicional. En lugar de eso, se basa en el establecimiento de un ‘prompt’ que el sistema recuerda cada vez que interactúa con el bot. Sin embargo, aún no estoy seguro de si es posible alimentar estos bots con textos, PDFs o páginas web personales, ya que la documentación no especifica cómo hacerlo. He contactado con los desarrolladores de la plataforma para obtener más claridad sobre esto.

He encontrado información útil en developer.poe.com, aunque llegar a esa fuente de información no fue tan sencillo como esperaba inicialmente. También encontré también un blog útil que explicaba varios aspectos de la creación de bots.

Mis experimentos se centraron en dos áreas: las respuestas contextualizadas por un ‘prompt’ y la clasificación. En el primer caso, comparé las respuestas de mi bot personal con las del bot genérico. Encontré que mi bot proporcionaba respuestas ligeramente más específicas, aunque aún necesito realizar más pruebas para confirmar esto.

En el segundo caso, utilicé el ‘prompt’ para guiar la clasificación de texto del bot. Alimenté al bot con un texto y me devolvió una tabla con la clasificación. Probé esto a pequeña escala con 50 resúmenes que había clasificado manualmente y encontré que el bot replicaba de manera razonable mi clasificación. Me gustó que el bot no solo clasificara el texto, sino que también proporcionara una explicación de sus decisiones si se lo pedía.

Comparé los resultados obtenidos con chat GPT-4 y Claude, ajustando la ‘temperatura’ en ambos casos. Encontré que chat GPT-4 parecía funcionar mejor, aunque esto puede deberse a diferencias en la forma en que cada plataforma interpreta la ‘temperatura’. Además, chat GPT-4 presenta los resultados en forma de tabla, que es más fácil de leer que la presentación separada por tabuladores de Claude.

En el futuro, planeo repetir estos experimentos con un mayor número de casos y comparar los resultados de ambas plataformas. También me interesa explorar las capacidades de Azure y planeo tomar algunos cursos de Microsoft para familiarizarme más con esta plataforma. Mientras tanto, continuaré perfeccionando mis prototipos y experimentando con ellos para ver cómo se desempeñan en diferentes situaciones.
#Reto21dias #IAgenerativa

Visitas: 32

Como evaluar en la universidad en la época del chargpt (IA generativa)

En las VI Jornadas FOLTE. La universidad de hoy: una visión integrada de la tecnología y la pedagogía celebradas el 6 de julio de 2023 había una ponencia que me interesaba especialmente: Artificial Intelligence for Assessment. Hoy la he visto en YOUTUBE.

En la parte de exposición no he encontrado nada que me sorprenda (es cierto que llevo como 2 años intensos trabajando sobre el uso de IA en aprendizaje y muchos más reflexionando sobre pedagogía universitaria y es difícil sorprenderme, aunque hay personas como Javier Paricio que suelen hacerlo con frecuencia).

En la ronda de preguntas, alguien quería saber «¿cómo hay que evaluar ahora?» La respuesta que dio la ponente fue más allá y no solo habló de cómo evaluar, sino de cómo usar el tiempo de clase, ahora que la IA generativa se ha popularizado (puedes verlo a partir de este momento de la presentación). Resulta que es exactamente como yo imparto mis clases desde 2003.

Por un lado, me tranquiliza (no tengo una urgencia rabiosa por actualizar mi docencia para el curso que viene). Por otro, me cuestiona mi labor como divulgador científico que ha dedicado una parte importante de su carrera a reflexionar sobre el papel del profesorado en el aprendizaje universitario. Creo que no he tenido nada de éxito en este campo. Ni siquiera en mi entorno inmediato (la UPV) parece haber calado este mensaje y desde luego en la universidad española no ha calado nada (y por eso ahora hay tanta gente «nerviosa» por la que se nos viene encima).

En fin, supongo que ahora me toca cambiar y empezar a usar un método, que sea el que lo pete dentro de 30 años (o si no, la próxima ola sí que me arrastrará a mi).

Visitas: 178

Reto21dias SIMIO. Resumen del dia 1

En mi primer día abordando este reto, dediqué tiempo a definir el caso de uso y a profundizar en mi entendimiento de Simio a través de una guía para principiantes disponible en su página web. Estos son los puntos clave que pude resumir de mi estudio y las metas que me he trazado para las próximas semanas. En esencia, trabajar con Simio implica modelar el flujo de ‘entidades’, un término que se utiliza dentro del contexto de Simio para referirse a cualquier objeto que se mueve dentro de un sistema, ya sea un paciente, un usuario, una pieza o un ítem. Este movimiento está limitado por los ‘recursos’, que pueden ser máquinas, puntos de atención al cliente, puntos de control, caminos, rutas, distancias, o incluso profesionales que te atienden en un proceso. La lectura también destacó los beneficios y usos de la simulación de eventos discretos. Entre estos, destacan la posibilidad de llevar a cabo pruebas en un entorno controlado sin afectar el entorno real, la capacidad de visualizar las cosas y usar estas visualizaciones como herramientas de comunicación, y la utilidad para la mejora continua de procesos. Un punto crítico que se mencionó es que cuanto más complejo se vuelve un sistema, menos intuitivo es comprender cómo funciona. Cambiar pequeñas cosas puede tener un impacto significativo, a veces de maneras que podrían no ser evidentes inicialmente. Por ejemplo, la inclusión de variabilidad o elementos aleatorios puede generar cambios drásticos en determinados indicadores, como el tiempo de espera. Además de leer y aprender, también creé mi primer modelo en Simio, que incorpora dos eventos aleatorios: el tiempo entre llegadas y los tiempos de atención. Mis metas para los próximos 21 días incluyen aprender a almacenar los valores de las distribuciones como parámetros, lo que permitiría crear experimentos de manera más fácil, sin tener que cambiar el modelo. También me gustaría aprender a guardar en una variable los resultados que me interesan, que no son necesariamente los que aparecen en los informes estándar de Simio. Además, deseo poder mostrar estas variables de resultado en una gráfica, para ver cómo evolucionan a lo largo del tiempo. Finalmente, me gustaría personalizar la apariencia de las entidades o recursos utilizando iconos 3D.

#Reto21dias #SIMIO

Visitas: 37

Reto21dias SIMIO. Descripción del objetivo

Durante los próximos 21 días, me embarcaré en un reto que consiste en dedicar 21 horas a explorar y entender el uso de Simio, una herramienta de software de simulación para desarrollar gemelos digitales. Mis metas para este periodo son principalmente aprender a utilizar Simio, una herramienta de simulación de eventos discretos, y crear tres laboratorios virtuales que simulan un proceso con eventos discretos. Mi plan consiste en replicar el mismo proceso de simulación utilizando tres herramientas diferentes: Simio, R y Python. Con las bibliotecas disponibles para R y Python, busco analizar y comparar las ventajas y desventajas de cada herramienta. Una limitación clave que enfrento es la falta de una necesidad específica para simular un proyecto o proceso en particular. Aunque esto me proporciona cierto grado de libertad, también reduce mi compromiso con el proyecto. Anticipo que las 21 horas que tengo planeado dedicar a este reto, posiblemente solo me permitirán completar la parte relativa a Simio. Sin embargo, esto es algo que se confirmará con el tiempo.

#Reto21dias #SIMIO

Visitas: 67

Reto21Dias IA generativa. Resumen dia 2

En el segundo día, continué trabajando en los casos de uso que había planteado en el primer día. Comparé mis casos de uso con los presentados en la charla del Microsoft Innovation Summit el 5 de julio. Durante este proceso, revisé mis notas y encontré similitudes y diferencias respecto a lo que se había discutido en la conferencia.

Los casos de uso que planteé se centran en el entrenamiento de un modelo de inteligencia artificial (AI) para realizar múltiples tareas, sin necesidad de alterar el entrenamiento del motor de lenguaje natural. Durante la conferencia, se expusieron varios ejemplos de aplicaciones de AI que siguen un esquema similar. Entre ellos, el Copilot de Microsoft, que permite la creación de texto basado en un contexto determinado, o la creación de ofertas para clientes basadas en un catálogo de productos y un roadmap empresarial.
Estos ejemplos, y otros similares, demuestran que la IA generativa basada en texto puede desempeñar diversas funciones, muchas de las cuales se alinean con los casos de uso que planteé.
Entre los ejemplos que se mostraron durante la conferencia, destaco lo siguientes:
Repsol ha desarrollado un bot de gestión documental que encuentra respuestas en una base de conocimientos compuesta por documentos en Word y PDF.
Técnicas Reunidas ha desarrollado una plataforma que le permite encontrar el documento relevante a una pregunta y luego proporcionar información relevante dentro de ese documento.
Además, durante la conferencia se mostraron ejemplos de clasificación de texto basados en características o temas específicos, una tarea que también forma parte de mis casos de uso. Un ejemplo de National Netherlands involucra la transcripción automática de llamadas de teléfono y la clasificación automática de correos electrónicos.
En resumen, mi segundo día de trabajo me permitió confirmar que los casos de uso que planteé son viables, ya que existen ejemplos de empresas que están implementando estrategias similares. Sin embargo, una pregunta que aún queda por responder es cuánto costaría desarrollar estas soluciones, teniendo en cuenta que los proyectos que se mostraron durante la conferencia fueron realizados con la ayuda de consultoras, que suelen tener precios elevados.
A pesar de algunas dificultades, como no poder registrarme exitosamente en Azure, estoy satisfecho con el progreso que logré durante el segundo día. En los días siguientes, planeo continuar investigando y profundizando en los temas que identifiqué durante este día.

#Reto21dias #IAgenerativa

Visitas: 35

Reto21dias IA generativa. Descripción de casos de uso

Os presento un proyecto de 21 horas en 21 días para explorar cómo funciona la inteligencia artificial generativa utilizando modelos de lenguaje. Voy a probar varios casos de uso utilizando plataformas como Chat GPT, Claude, y Llama, dentro del contexto de poe.com.

El primer caso de uso es alimentar un chat con un contexto dado y poder interrogar al bot dentro de ese contexto. Voy a probar diferentes tipos de documentos para ver cuánto contexto puede manejar cada plataforma.

El segundo caso de uso es clasificar documentos en diferentes tipos utilizando el modelo de lenguaje natural por defecto de la plataforma. Quiero probar cuántos textos son necesarios para alimentar el contexto para que la clasificación sea fiable y si es posible obtener la probabilidad de pertenencia a cada uno de los tipos. Una variante de este caso es identificar los criterios que diferencian un tipo de otro utilizando un conjunto de documentos y que sea la plataforma la que los identifique en función de los temas que tocan esos documentos. La salida esperada es la probabilidad de que un nuevo texto sea de un tipo u otro (por ejemplo, interesa o no interesa).

Por último, quiero comparar cómo funciona Chat GPT4 respecto a Poe.com a la hora de resolver estos casos de uso y ver cuál de las dos plataformas encaja mejor.

En el futuro, fuera de este reto de 21 horas, quiero programar directamente con Python utilizando las APIs de Chat GPT o de Anthropic (Claude) directamente para pasarle los parámetros y que sean procesados.

#Reto21dias  #IAgenerativa

Visitas: 46

How to biblioteca UPV encontrar libros de un departamento

No resulta evidente como localizar En Polibuscador los fondos que forman parte de la colección de un Departamento. Te explico cómo hacerlo en esta entrada. Abrimos Polibuscador: https://polibuscador.upv.es/ , en la caja de búsqueda hay que poner un asterisco: *, para que busque todos los libros (si sabes el tema o titulo aproximado puedes usar la busqueda más orientada).

Después, desde los filtros de la derecha, en la pestaña “Biblioteca” es posible seleccionar departamentos (además de Bibliotecas). Es decir los libros de un departamento se consideran una «biblioteca» departamental.

Por ejemplo, para localizar los del Dpto. Organización de empresas serían: https://acortar.link/gvNSdo

Visitas: 50

¿Cómo vamos de entusiasmo en nuestras organizaciones?

Source: Global Indicator: Employee Engagement – Gallup

Los datos provienen de la engagement survey. La encuesta se pasa periódicamente y según la página web de Gallup, han recogido más de 2.7 millones de respuestas de personas que trabajan en más de 100.000 equipo en organizaciones más de 50 actividades económicas a lo largo de todo el mundo. La información que he encontrado sobre la “Gallup World Poll” (https://www.gallup.com/178667/gallup-world-poll-work.aspx) indica que el muestreo es aleatorio (por rutas estratificadas) entre personas mayores de 15 años que trabajan al menos ciertas horas para un empleador. Se realiza la entrevista de forma telefónica o cuestionario web autoadministrado en los países desarrollados y de manera presencial en los países emergentes. A entrevista dura unos 30 minutos y les preguntan muchas cosas además del Q12. Encada país se recogen entre 500 y 1000 respuestas (menos en Rusia y China que se recogen 2000). En esta ruta puedes encontrar detalles sobre la administración en cada país (https://www.gallup.com/services/177797/country-data-set-details.aspx)

Su instrumento de medida es el Q12. Que mide la percepción de empleados/as respecto a 12 ítems (yo prefiero medir el engagement con otra herramienta, y creo que esta mide un mezcladillo de cosas, no solo engagement. Pero no me voy a poner quisquilloso con esto). El engagement podríamos definirlo de forma rápida como la implicación y el entusiasmo de una persona empleada acerca de su trabajo y de la organización para la que trabaja.

Gallup clasifica a las personas empleadas en tres categorías usando una formula propia (y no compartida) que pondera los diferentes elementos y la adapta a diferentes circunstancias (de modo que no se puede reproducir sumando las personas que responden “totalmente de acuerdo” y “de acuerdo” a cada ítem). Estas tres categorías son:

  • Implicadas (tienen sus necesidades básicas cubiertas, tienen oportunidad de contribuir y sentido de pertenencia en la organización y encuentran oportunidades de aprender y crecer). Estas personas están muy motivadas y muestran entusiasmo. Son motores de rendimiento e innovación y ayudan a que la organización mejore y se desarrolle.
  • No Implicadas (están psicológicamente desapegados de su trabajo y de su organización). Son personas que dedican tiempo, pero no energía o pasión a su trabajo
  • Activamente desconectados (estas personas no solo están descontentas, sino que están resentidos. Sienten que sus necesidades no están siendo satisfechas y expresan su infelicidad abiertamente). Es muy probable que estas personas destrocen cada día (consciente o inconscientemente) el trabajo y el esfuerzo que realizan sus compañeros/as más comprometidos

La evolución global del indicador de engagement muestra que en los años recientes se ha estancado (o reducido el número de personas implicadas, y, al mismo tiempo ha crecido el de activamente desconectadas).

Mi reflexión. Si llegamos a un punto de equilibrio donde hay la misma cantidad de personas desconectado como implicadas, la resultante es cero… unas destrozan y anulan el esfuerzo de las otras. De modo que, poco a poco, las implicadas dejarán de estarlo porque verán que su esfuerzo no vale para nada… Quizás la única solución es mimar todo lo que puedas a las personas implicadas que tengas y ver si hay algo que puedes hacer con las desconectadas, o para evitar que las no implicadas se vayan al lado oscuro en masa.

 

Insisto en que no estoy seguro de que el Q12 mida exactamente engagement, o que solo engagment. Pero mida lo que mida, Europa es el lugar de mundo con menos de eso en 2021 (según los datos de Gallup).

Y si nos fijamos en los datos de satisfacción (solo he encontrado los datos de USA), se aprecia una gran bajada en las personas “extremadamente satisfechas con la organización para la que trabajan” en los últimos años. No obstante, hay que tener en cuenta que la gráfica está truncada y el “salto” da la impresión de ser más grande de lo que sería en realidad si el eje de ordenadas empezara en cero.

¿Estará pasando algo parecido en Europa? ¿Y en España?

¿Crees que sería interesante que analizáramos estos datos de Europa y desglosado por actividad económica, tipo de ocupación y sector público vs privado?

Visitas: 41

Competencias, habilidades, rasgos de personalidad ¿es todo lo mismo?

Mis estudiantes y yo estábamos (estamos) interesados en conocer cuáles son las competencias transversales más demandadas para los primeros empleos cuando acaben su grado (en este caso de la rama de ingeniería).

Hemos estado haciendo un ejercicio de investigación leyendo artículos científicos que aborden este tema: ¿cuáles son las competencias transversales más demandadas actualmente o con horizonte 2030 por las empresas? ¿son las mismas en todos los perfiles profesionales?

En las respuestas que han encontrado mis estudiantes aparecen términos como «lealtad», «bondad», «simpatía», «honestidad». A mi, estas cosas (a pesar de que están identificadas como «competencias» en algunas fuentes) me parecen más rasgos de personalidad que competencias.

Para mí las competencias transversales (soft skills) son algo como «liderazgo», «trabajo en equipo», «emprendimiento».

En este vídeo hice un intento de definir competencia (Marin-Garcia, Perez-Peñalver y Watts, 2013) y diferenciarlo de capacidades, habilidades y objetivos de aprendizaje.

Quizás se me quedó pendiente añadir rasgos de personalidad en mi modelo.

Referencias:

  • Marin-Garcia, J. A., Perez-Peñalver, M. J., & Watts, F. (2013). How to assess innovation competence in services: The case of university students. Direccion y Organizacion(50), 48-62. http://www.revistadyo.com/index.php/dyo/article/viewFile/431/451

 

Visitas: 208

Debate interesante sobre docencia universitaria (extraído de linkedin)

Me gustan las cosas que leo en este articulo corto «querido profesor, nos lo están pidiendo a gritos….«,  como respuesta a éste otro “Querido alumno universitario de grado: Te estamos engañando”.  Sobre todo, porque me recargan de esperanza (dicen que me caí en la marmita de esta extraña poción cuando era pequeño, pero agradezco de vez en cuando un chupito).
Por añadir un matiz que contribuya a lo que comenta Asier, a mí me gusta recalcar que busco potenciar la «actividad neuronal» en mis clases. Lo hago para que no se confunda con que mis estudiantes solo «se muevan en al aula» o que «hagan cosas diferentes de tomar apuntes». Solo eso no convierte la clase en activa. Debo (o a eso aspiro) ayudarles a que se creen nuevos conocimientos/habilidades/actitudes (aunque sea micro cambios en una sesión) y/o se conecten de forma distinta los conocimientos/habilidades/actitudes que ya poseen. Eso es para mi la esencia de las metodologías activas (todo lo demás son herramientas, más o menos llamativas, que no siempre «activan» demasiado 😉 ).

Visitas: 42