Compatibilidad de Intuiface con los grandes modelos lingüísticos GPT, DALL-E y Whisper de OpenAI

Visión general

Hay un sinfín de ejemplos de tecnologías que "cambian el juego" pero que al final no lo han conseguido. El Segway, Google Glass, Napster, Crypto.... Vale, la última todavía tiene posibilidades de ser algo más que un juego, y estos otros fracasos seguramente influyeron en la creación de alternativas de éxito. Sin embargo, el bombo se ha exagerado.

No se ha exagerado con la IA Generativa. Ya ha empezado a cambiar las reglas del juego. Este artículo trata de cómo puedes empezar a sacar partido de la IA Generativa en Intuiface.

Novedades de Intuiface

Composer incluye ahora tres nuevos activos de interfaz (IA): ChatGPT, DALL-E y Whisper

Esto es lo que permiten:

• ChatGPT
  Bajo las cubiertas, este es el modelo de lenguaje GPT grande (LLM)- aquí hay un artículo sobre GPT-4 - lo que significa que lo que puedes hacer en Intuiface funciona igual que ChatGPT. Envíe una pregunta, obtenga una respuesta y repítala si lo desea. Puede preguntar cualquier cosa, proporcionar orientación al sistema y, a continuación, analizar los resultados para extraer lo que desea.
• DALL-E
  Bajo las sábanas, este es el modelo de lenguaje grande de DALL-E. Crea una imagen a partir de cualquier instrucción.
• Whisper
  Bajo las sábanas, éste es el modelo lingüístico Whisper large. Utiliza el micrófono predeterminado para capturar la palabra hablada y transcribirla en texto. Este texto se puede utilizar para complementar un aviso enviado a los activos de interfaz ChatGPT o DALL-E, pero puedes utilizarlo como quieras.

Verás que para ChatGPT y Whisper tenemos dos versiones del activo de interfaz. Nuestra nueva tecnología Player - en todas las plataformas excepto Windows - soporta IAs basadas en TypeScript. Este tipo de activo de interfaz aún no está soportado en Windows; utilizamos .NET para construir IAs para Windows. Funcionalmente, estas dos variantes de la IA son idénticas, pero tuvimos que codificarlas para tener en cuenta cierta complejidad de la API. Con DALL-E pudimos trabajar directamente con su Web API y así utilizamos API Explorer. (Sí, podría haberlo hecho usted mismo.) Las IAs para Web APIs son universales en todas las plataformas Player .

¿Cómo construimos estos nuevos activos de interfaz?

Todos los grandes modelos lingüísticos de OpenAI son accesibles a través de una API. Nuestros activos de interfaz se construyeron para utilizar esas API:

• ChatGPT IA utiliza la API OpenAI Chat Completion para comunicarse con el GPT LLM subyacente.
• DALL-E utiliza la API OpenAI Images para comunicarse con el modelo subyacente de DALL-E.
• Whisper utiliza la API de audio OpenAI para comunicarse con el LLM Whisper subyacente.

Como todos los activos de interfaz, ocultamos la complejidad subyacente de la API. Todo lo que se ve en Composer son propiedades, activadores y acciones.

¿Necesito una cuenta de OpenAI para utilizar estos activos de interfaz?

Sí, necesitará una cuenta OpenAI. En concreto, tendrá que proporcionar a cada IA su clave de API de OpenAI.

Una clave API se adquiere creando una cuenta OpenAI y luego comprando tokens. (Cada consulta y respuesta LLM consume tokens, y esos tokens tienen un coste). Una vez que tengas una cuenta y hayas comprado tokens, dirígete a la página OpenAI API Key para encontrar tu clave.

Aquí hay algo curioso que debes tener en cuenta: OpenAI sólo le mostrará su clave de API una vez, cuando se crea originalmente. NUNCA podrás volver a ver esa clave. Asegúrate de copiar tu(s) clave(s) API en un lugar seguro para poder reutilizarla(s) en todas tus experiencias.

¿Cuál es un ejemplo genial de cómo utilizar estos activos de interfaz?

Eche un vistazo a este fantástico ejemplo, un buscador de rutas basado en inteligencia artificial creado por Tosolini Productions para el Museo del Vuelo de Seattle (Washington). Permite a los visitantes del museo encontrar fácilmente las zonas de exposición que se ajustan a sus intereses mediante consultas en lenguaje natural. Muestra cómo Intuiface puede conseguirlo utilizando Whisper como mecanismo de entrada e ingeniería de instrucciones especializada para que GPT ofrezca recomendaciones personalizadas.

‍

Cabe destacar la genialidad de su mensaje. Están "enseñando" a GPT a ser un buscador de caminos para el museo. Se define el objetivo del buscador, se aclaran las restricciones y se estructuran los resultados. Es un ejemplo perfecto de "programación en lenguaje natural", que encaja con la estética sin código de Intuiface.

¿Quieres probar algo en Composer?