Consideración de RAG al evaluar herramientas de IA generativa

mayo 15, 2024 0

 

No todas las herramientas de IA son iguales para la investigación



Todo fue más fácil en noviembre de 2022 cuando ChatGPT entró en escena. Había un modelo de lenguaje grande (LLM) popular. Si bien no sabíamos exactamente qué hacer con él, fue realmente genial jugar con él. Pero un año y medio después, la novedad de la IA se ha agotado.

Una encuesta del seminario web ACRL  Choice de abril de 2024 reveló que el 68% de las bibliotecas universitarias “todavía están averiguando” lo que se refiere a la IA. Con una mayor presión para resolverlo, a los bibliotecarios académicos se les presenta una cantidad abrumadora de herramientas de inteligencia artificial , algunas de las cuales son increíblemente caras. ¿Cómo se puede empezar a crear una rúbrica para evaluar estos productos?

Categorización de aplicaciones de IA

A estas alturas, la mayoría de nosotros sabemos que existen diferentes tipos de aplicaciones de IA para el consumidor:

  • La IA conversacional se ha colado en nuestras vidas en forma de asistentes digitales. Si bien Siri y Alexa están ansiosas por configurar un cronómetro y contarnos chistes sobre gatos , tienden a ceñirse a un guión básico. Son como el droide gonk de la IA.

  • La IA predictiva se utiliza actualmente en los negocios y en la atención médica para pronosticar tendencias. Su banco utiliza una IA predictiva para observar las transacciones y detectar cargos fraudulentos. Los especialistas en marketing lo utilizan para analizar las tendencias de compra de los clientes y ofrecerle anuncios en línea. La IA predictiva analiza datos pero no crea nuevos conocimientos.

  • La IA generativa es mucho más poderosa y, de hecho, puede crear información, como historias y comunicados de prensa falsos. Los científicos entrenan algoritmos LLM con cantidades masivas de datos (por ejemplo, millones de artículos del New York Times , supuestamente). Cuando el usuario entabla una conversación con el LLM, el algoritmo crea una respuesta basada no en las reglas de la gramática inglesa, sino en la probabilidad de cuál debería ser la siguiente palabra según su entrenamiento.

La mayoría de las herramientas desarrolladas para bibliotecas son aplicaciones de IA generativa. Estas son herramientas legítimas que ayudan con la gestión de referencias . Son herramientas de investigación que automatizan la revisión de la literatura y el análisis de documentos . Estas herramientas han sido creadas por algunos de los nombres líderes en tecnología bibliotecaria: Clarivate, Elsevier, JSTOR y SirsiDynix, solo por nombrar algunos. Pero, ¿cómo cuadran estas herramientas con el pánico moral de los estudiantes que usan ChatGPT para hacer trampa en sus tareas? ¿Cómo puede una herramienta de IA ser virtuosa y la otra mala?

Por qué necesitas conocer RAG

Todo se reduce a la Generación Aumentada de Recuperación (RAG). RAG es un marco que crea una aplicación para LLM de IA generativa. Si bien es divertido jugar con ChatGPT y Chatbot Arena , no son particularmente útiles para los académicos.

Las limitaciones de la IA generativa son innumerables:

  • No proporcionan citas.
  • Son propensos a sufrir alucinaciones.
  • No hay forma de reproducir los resultados.
  • Existen problemas importantes con los derechos de autor y la privacidad del usuario.

Si bien RAG no resuelve todos estos problemas, comienza a abordar las preocupaciones de la comunidad académica. Es el primer paso hacia la creación de una herramienta LLM que sea realmente útil para la educación superior. En esencia, RAG es la diferencia entre la IA generativa por diversión y la IA generativa como herramienta de investigación legítima.

RAG mejora la red neuronal LLM al incorporar nueva información (por ejemplo, un conjunto de datos específico) y optimizar la salida para que los usuarios sepan cómo se generó esa salida (por ejemplo, citas). Digamos que le pido a Claude que me cuente las consecuencias sociales de los casos de la Corte Suprema decididos en abril de 2024. El algoritmo de Claude LLM debería poder rastrear el sitio web de la Corte Suprema para casos recientes. Pero resulta que la versión gratuita, que no es RAG, de Claude fue entrenado por última vez en agosto de 2023. El chatbot admite libremente que no sabe nada sobre lo que pasó la semana pasada. Esto es decepcionante, pero al menos admite no saberlo. Después de todo, otros LLM simplemente inventan cosas.


La diferencia RAG

Perplexity, que utiliza RAG, agrega valor al LLM subyacente al ayudar a los usuarios a perfeccionar sus indicaciones. También permite a los usuarios elegir un conjunto de datos y proporciona citas y enlaces para resultados de búsqueda. Claude tiene limitaciones, pero Perplexity proporciona a los usuarios herramientas que crean una experiencia mucho más útil y confiable.

Le hice a Perplexity mi pregunta sobre las últimas decisiones de la Corte Suprema y tuve una experiencia completamente diferente. Primero, me impulsó a ser específico sobre las consecuencias sociales que me interesaban: derechos civiles, medio ambiente o inmigración. Esa es una buena pregunta, Perplejidad.


Todavía puedo usar Claude como mi LLM, pero RAG me permite elegir mi conjunto de datos (Semantic Scholar, Reddit o web completa). También me proporciona citas para que pueda verificar y asegurarme de que la información que he recibido no sea una alucinación.


RAG es algo bastante poderoso y es por eso que las herramientas de suscripción como Scopus AI, Scite, Power Notes y otras agregan tanto valor a los LLM. Los chatbots pueden ser juguetes geniales, pero no son herramientas para académicos. La tecnología RAG aún es nueva, pero mejora con cada lanzamiento de producto. Comprender RAG y su papel en la mejora de los LLM es clave para los bibliotecarios que evalúan y hacen recomendaciones de compra de herramientas de IA generativa en sus instituciones. Los estudiantes y profesores también deben comprender RAG al considerar qué producto de IA utilizar para su propia investigación. La IA ha cambiado permanentemente la forma en que investigamos, y un buen RAG es imprescindible en el conjunto de herramientas de cualquier académico.

Read more...

Las percepciones de los estudiantes acerca de la inteligencia artificial (IA)

mayo 15, 2024 0

 

un nuevo informe sobre las percepciones de los estudiantes acerca de la inteligencia artificial (IA) generativa, basado en una serie de foros de discusión realizados durante el invierno pasado con más de 200 estudiantes de colegios y universidades. Este seguimiento se hizo para entender si y cómo han cambiado las opiniones de los estudiantes respecto a la IA generativa desde el informe anterior y para explorar su rol emergente en la educación.

A medida que las instituciones enfrentan el desarrollo de políticas y directrices, así como los complejos cambios pedagógicos, es crucial captar la voz auténtica de los estudiantes para informar una integración responsable de la IA que los capacite y mantenga la integridad académica.

Cambios clave desde la primavera de 2023

La adopción de la IA generativa en la educación por parte de los estudiantes está experimentando una notable transformación, reflejo de la rápida evolución de la propia tecnología. En tan solo nueve meses, desde el informe anterior, se ha observado un cambio evidente en la forma en que los estudiantes utilizan la IA generativa, así como una maduración de las expectativas de sus instituciones para apoyarles en su camino hacia el empleo en un mundo habilitado para la IA.

Transición al aprendizaje colaborativo: Los estudiantes/aprendices ven cada vez más la IA generativa como una herramienta colaborativa para entrenar y apoyar el aprendizaje activo y el pensamiento crítico, utilizando estas herramientas como un asistente digital en lugar de verlas puramente como proveedoras de respuestas.

Énfasis en las competencias futuras: Los estudiantes subrayaron la importancia de contar con competencias en IA generativa que sean relevantes para sus futuros sectores. Hay una demanda creciente de una educación que integre la IA generativa en todo el plan de estudios y refleje el mundo habilitado para la IA en el que todos vivimos ahora.

Ética, equidad y accesibilidad: Los estudiantes están cada vez más concienciados y preocupados por los problemas de equidad, parcialidad y accesibilidad relacionados con la IA, y abogan por medidas que aborden estos retos para garantizar una experiencia educativa segura, inclusiva y receptiva.

Integración global y competencia de los educadores: Existe una clara expectativa por parte de los estudiantes de una integración completa de la IA generativa en la educación, con un uso competente por parte de los educadores y políticas que garanticen un entorno de aprendizaje mejorado por la IA justo y eficaz.

FUENTE:

Read more...

Impacto de la Inteligencia Artificial en la Educación Superior - EDUCAUSE 2024

mayo 14, 2024 0

 El informe Horizon perfila las tendencias y tecnologías clave y prácticas que están dando forma al futuro de la enseñanza y el aprendizaje, y visualiza una serie de escenarios para ese futuro. Está basado en las perspectivas y experiencia de un panel global de líderes de todo el panorama de la educación superior.

En el desenlace de la pandemia de COVID-19, hablar de un regreso a la "normalidad" en la educación superior oculta los grandes desafíos y las interrupciones continuas que aún quedan por delante para muchas instituciones. Las percepciones públicas sobre el valor de la educación postsecundaria continúan su declive, colocando a las instituciones en la posición de tener que demostrar su valía y encontrar soluciones para la disminución de las matrículas. Las capacidades de datos y análisis continúan evolucionando, introduciendo nuevas oportunidades y nuevos riesgos para la institución. Entre estas capacidades, la inteligencia artificial generativa promete cambiar la enseñanza y el aprendizaje de maneras que muchos de nosotros aún no entendemos completamente ni estamos preparados para.

Para el Informe Horizon de enseñanza y aprendizaje de este año, las discusiones de los expertos destacaron y lidiaron con estos desafíos presentes y futuros para la educación superior. Este informe resume los resultados de esas discusiones y sirve como un punto de vista sobre hacia dónde podría dirigirse nuestro futuro.

Tecnologías clave y prácticas discutidas en el informe:

  • Inteligencia Artificial
  • Herramientas y procesos accesibles e inclusivos
  • Apoyo a la conexión y pertenencia estudiantil con la tecnología
  • Amplio apoyo a la salud mental para estudiantes
  • Modelos de datos unificados para análisis del aprendizaje
  • Desarrollo de la alfabetización de datos para comprender y utilizar datos estudiantiles

El informe de este año incluye una sección de honor dedicada a la inteligencia artificial. La IA continúa causando impacto no solo en la educación superior, sino a nivel global, en diversas industrias y en contextos personales y sociales cotidianos. La influencia de la IA es amplia y, quizás no sorprendentemente, los panelistas de este año nominaron al menos una tendencia relacionada con la IA en cada una de las cinco categorías de tendencias. En esta sección destacamos brevemente algunas de las tendencias e impactos relacionados con la IA en los ámbitos social, tecnológico, económico, medioambiental y político que están tomando forma.

Tendencias Sociales: La IA está cambiando la forma en que nos comunicamos. Cada vez se utiliza más en interacciones y conversaciones humanas, y aumenta la discusión sobre las formas en que la IA puede moldear no solo la comunicación humana, sino también, de manera más amplia, las habilidades socioemocionales. Cada vez más, las personas no solo utilizan la IA para facilitar la comunicación, sino que también conversan directamente con la IA (por ejemplo, a través de chatbots o asistentes virtuales, y algunos recurren a la IA generativa como compañeros de conversación). La IA tiene el potencial de cambiar la conexión y comunicación humanas de varias maneras. Como resultado, la educación superior necesitará comprender las formas en evolución en que profesores, estudiantes y personal están utilizando la IA y prepararse para adaptarse a los cambios en la forma en que los estudiantes se comunican. También deberán actualizar el plan de estudios que involucra habilidades socioemocionales y comunicación para tener en cuenta estos cambios. A continuación, se presentan varias formas en que la IA podría impactar la comunicación y los resultados socioemocionales:

  • Causar percepciones negativas de otros.
  • Cambiar las normas de lo que se considera apropiado al conversar con otros.
  • Distorsionar el sentido de uno mismo y de los demás.
  • Hacer que las personas se comporten más como máquinas.
  • Obstaculizar las habilidades sociales en jóvenes y personas neurodiversas.
  • Ayudar a las personas con discapacidades de comunicación a comunicarse mejor.
  • Facilitar y obstaculizar el aprendizaje y uso de idiomas extranjeros.
  • Mejorar la comunicación dentro de las organizaciones.
  • Exacerbar la soledad.

Las herramientas de IA tienen un potencial creciente para remodelar la pedagogía y las experiencias de los estudiantes. Cuando ChatGPT irrumpió en escena, captó la atención de profesores y estudiantes a nivel mundial. Desde entonces, ha habido una gran preocupación por el uso de la IA generativa en el aula, especialmente en el ámbito de las evaluaciones de cursos y la detección de plagio. Sin embargo, las herramientas de IA no solo están volviéndose más sofisticadas, sino que están expandiéndose más allá de las evaluaciones. Cada vez surgen más usos para la IA en el aula, y estas tecnologías tienen el potencial de cambiar el panorama de la enseñanza y el aprendizaje y la experiencia estudiantil de varias maneras, para bien o para mal. A medida que estas tecnologías continúan cambiando y aumenta su adopción, las instituciones de educación superior tendrán que actualizar regularmente sus recomendaciones y pautas sobre el uso de dichas tecnologías, prestando atención a las políticas gubernamentales propuestas que pueden implementarse en un futuro cercano. Las instituciones también pueden ayudar a sus profesores y estudiantes a ser usuarios más conscientes y responsables mediante la provisión de formación y recursos de alfabetización digital y encontrando formas de aprovechar la IA para mejorar las experiencias pedagógicas y los resultados estudiantiles. A continuación, se presentan varias formas en que la IA podría impactar la pedagogía y la experiencia estudiantil:

  • Abrir el camino, a través de la IA multimodal e interactiva, para tecnologías educativas mucho más sofisticadas y receptivas.
  • Dar forma al futuro del pensamiento crítico.
  • Facilitar la ideación y la creatividad.
  • Impulsar la participación estudiantil.
  • Mejorar la gestión del aula.
  • Redefinir el enfoque de las evaluaciones.
  • Personalizar el aprendizaje.
  • Actuar como tutores y proporcionar retroalimentación a los estudiantes.
  • Mejorar las plataformas de gestión del aprendizaje.
  • Ayudar con la salud mental de los estudiantes.

Esta doble exploración de las implicaciones sociales y tecnológicas de la IA subraya su influencia multifacética en la enseñanza, el aprendizaje y las dinámicas sociales más amplias, lo que requiere una adaptación proactiva e integración responsable dentro de los contextos de la educación superior.



Read more...

OpenAI presenta el modelo 'omni' GPT-4o que ahora impulsa ChatGPT

mayo 14, 2024 0

Créditos de imagen: OpenAI

OpenAI anunció el lunes un nuevo modelo emblemático de IA generativa al que llaman GPT-4o; la "o" significa "omni", en referencia a la capacidad del modelo para manejar texto, voz y video. GPT-4o se implementará "iterativamente" en los productos de desarrollo y consumidores de la compañía durante las próximas semanas.

La CTO de OpenAI, Mira Murati, dijo que GPT-4o proporciona inteligencia de "nivel GPT-4", pero mejora las capacidades de GPT-4 en múltiples modalidades y medios.

"GPT-4o comprende voz, texto y visión", dijo Murati durante una presentación transmitida en las oficinas de OpenAI en San Francisco el lunes. "Y esto es increíblemente importante, porque estamos mirando al futuro de la interacción entre nosotros y las máquinas".

GPT-4 Turbo , el modelo anterior "líder" más avanzado "de OpenAI, fue entrenado en una combinación de imágenes y texto y podía analizar imágenes y texto para realizar tareas como extraer texto de imágenes o incluso describir el contenido de esas imágenes. Pero GPT-4o añade voz a la mezcla.

¿Qué permite esto? Una variedad de cosas. 

Créditos de imagen: OpenAI

GPT-4o mejora enormemente la experiencia en el chatbot impulsado por IA de OpenAI, ChatGPT . La plataforma ha ofrecido durante mucho tiempo un modo de voz que transcribe las respuestas del chatbot utilizando un modelo de texto a voz, pero GPT-4o lo potencia, permitiendo a los usuarios interactuar con ChatGPT más como un asistente. 

Por ejemplo, los usuarios pueden hacer una pregunta al ChatGPT con tecnología GPT-4o e interrumpir ChatGPT mientras responde. El modelo ofrece capacidad de respuesta "en tiempo real", dice OpenAI, e incluso puede captar matices en la voz de un usuario, generando en respuesta voces en "una variedad de estilos emotivos diferentes" (incluido el canto). 

OpenAI recientemente presentó su última novedad de inteligencia artificial, GPT-4o, e introdujo una versión de escritorio de ChatGPT, brindando un conjunto de funciones mejoradas al alcance de todos los usuarios de forma gratuita. GPT-4o («o» de «omni») es un paso adelante hacia una interacción mucho más natural entre el ser humano y el ordenador: acepta como entrada cualquier combinación de texto, audio e imagen y genera cualquier combinación de texto, audio e imagen como salida.

OpenAI lanzó el lunes un nuevo modelo de IA y una versión de escritorio de ChatGPT, junto con una nueva interfaz de usuario. La actualización pone GPT-4 a disposición de todo el mundo, incluidos los usuarios gratuitos de OpenAI, según explicó la directora técnica Mira Murati en un evento retransmitido en directo. Añadió que el nuevo modelo, GPT-4o, es «mucho más rápido», con capacidades mejoradas en texto, vídeo y audio.

Los miembros del equipo de OpenAI también demostraron las capacidades de audio del nuevo modelo, pidiendo ayuda para calmarse antes de un discurso público. Mark Chen, investigador de OpenAI, afirmó que el modelo es capaz de «percibir tus emociones», y añadió que también puede hacer frente a las interrupciones de los usuarios.

Durante la retransmisión en directo, OpenAI demostró las capacidades de conversación de audio en tiempo real de GPT-4o, mostrando su capacidad para entablar un diálogo natural y receptivo sin el típico retraso de 2-3 segundos experimentado con modelos anteriores. El asistente de IA parecía captar fácilmente las emociones, adaptaba su tono y estilo a las peticiones del usuario e incluso incorporaba efectos de sonido, risas y canciones a sus respuestas.

Cuando esté disponible, nos encontraremos con un asistente con el que podremos comunicarnos de manera completamente natural, como lo haríamos con otro ser humano. Podremos interrumpirlo mientras responde, características que hasta ahora no se habían visto en ninguna otra IA. El modelo no solo ofrece respuestas instantáneas, sino que también proporciona respuestas en una variedad de tonos de voz, e incluso puede reír, cantar, expresar diferentes estados de ánimo y resolver problemas matemáticos. Una de las características destacadas que llegará a ChatGPT gracias al nuevo modelo es la traducción instantánea. OpenAI busca que simplemente le pidamos lo que queramos al chatbot para que comience a hacer su trabajo, todo en lenguaje natural, sin necesidad de pensar en comandos específicos.

Además, se destacó la comprensión visual mejorada de GPT-4o. Al cargar capturas de pantalla, documentos que contienen texto e imágenes o gráficos, los usuarios pueden mantener conversaciones sobre el contenido visual y recibir análisis de datos de GPT-4o. En la demostración, el modelo demostró su capacidad para analizar selfies, detectar emociones y participar en bromas animadas sobre las imágenes.

Las características disponibles para los usuarios gratuitos de ChatGPT incluirán inteligencia de nivel GPT-4, respuestas tanto del modelo como de la web, análisis de datos y creación de gráficos, conversaciones sobre fotos tomadas, asistencia para resumir, escribir o analizar archivos cargados, y la posibilidad de descubrir y utilizar GPTs y la tienda GPT para construir una experiencia más útil con la función de Memoria.

Entre las funciones disponibles para los usuarios gratuitos de ChatGPT a partir de ahora se incluyen las siguientes, según OpenAI:

  • Experiencia de inteligencia de nivel GPT-4
  • Obtener respuestas tanto del modelo como de la web
  • Analizar datos y crear gráficos
  • Conversa sobre las fotos que haces
  • Sube archivos para que te ayuden a resumir, escribir o analizar
  • Descubrir y utilizar GPTs y el GPT Store
  • Construye una experiencia más útil con la Memoria

Read more...

Feria de Proyectos 2018 II

Feria de Proyectos 2018 II Desarrollando la creatividad y la innovación para la solución de problemas y necesidades del país a tr...

Follow Us @soratemplates