Una “cámara de poesía” con IA está convirtiendo imágenes en palabras. Básicamente, se trata de revertir la tendencia actual de generar imágenes a partir de entradas de texto.
La IA generativa ahora escribe haikus para describir imágenes
Inteligencia Artificial Generativa (Gen AI) ha estado evolucionando rápidamente. Los usuarios de Internet han adoptado la Generación AI y han estado usando sus palabras para crear imágenes y videos. Sin embargo, se informó que un nuevo proyecto utilizó Gen AI para revertir el proceso.
En lugar de usando la generación AI para convertir indicaciones de texto en imágenes, vídeos o músicaun nuevo Una cámara impresa en 3D está componiendo poemas basado en entradas visuales. En otras palabras, en lugar de generar imágenes, la Generación AI ahora observa personas, objetos y otros aspectos visuales, y luego los describe en forma de haikus o poemas cortos.
Mientras esperaba el vuelo de hoy, vi un producto de «hardware de IA» muy especial que me dejó una profunda impresión.
Permítanme presentarles este producto primero. Se llama Poetry Camera. No se ve diferente de una cámara Polaroid. Todas las diferencias ocurren después de que el usuario presiona el obturador.
Después de terminar el rodaje, lo que la cámara escupió no fue papel fotográfico, sino un pequeño trozo de papel con un poema impreso, tal como una Polaroid revela una foto en el acto.#AI pic.twitter.com/ektsYRtuPB— Zhijian AI (@shadouyoua) 5 de mayo de 2024
El «Cámara de poesía”imprime un poema singular, breve y supuestamente único en su tipo en papel térmico. Toma el dicho “Una imagen vale más que mil palabras” y lo utiliza para instruir a la Generación AI a crear un poema breve salpicado generosamente de metáforas.
Los creadores de Poetry Camera comparten actualizaciones mensuales a través de su boletín. Prometen una producción de edición limitada de la cámara.
No hay un cronograma confirmado para el lanzamiento comercial de Poetry Camera. Los creadores ni siquiera insinúan ningún precio. Sin embargo, los interesados podrían crear uno si quisieran.
¿Cómo utiliza Poetry Camera Gen AI para tejer poemas?
Los creadores de Poetry Camera no ocultan su tecnología. Ellos he compartido instrucciones detalladas si la gente está interesada en construir su propia cámara de poesía e incluso personalizarla.
En el corazón de Poetry Camera se encuentra una Raspberry Pi SBC (computadora de placa única). En concreto, están utilizando la Raspberry Pi Zero 2 W, lo cual sorprende porque no incluye mucha potencia de procesamiento ni RAM.
Estoy planeando construir esta cámara de poesía. ¡Es una idea genial! Básicamente, es una Raspberry Pi Zero 2 W con un módulo de cámara que ejecuta @OpenAIModelo GPT-4 de para analizar la foto; luego imprime un poema basado en las señales visuales. https://t.co/TakMJUdYgb
—Chad Mairn (@cmairn) 2 de mayo de 2024
El Pi Zero 2 W está emparejado con el módulo de cámara Pi 3. Como indica la página de instrucciones, los creadores de Poetry Camera han confiado en software de código abierto y GPT-4 para la base Gen AI. Han impreso en 3D el cuerpo de la cámara, que también alberga una batería.
Hay una impresora térmica integrada dentro de la carcasa impresa en 3D que se asemeja a la cámara instantánea Fujifilm Instax. Esto significa que Poetry Camera es una impresora “fotográfica” sin tinta que simplemente necesita un rollo de papel para imprimir poemas.