Algunas de las tecnologías más impresionantes que Adobe muestra en su conferencia anual Max cada año son las características experimentales que está desarrollando, y la última de estas herramientas se anuncia hoy: puede convertir imágenes en escenas 3D explorables, diseñar personajes de IA hablando con ellos y convertir la edición de imágenes en un proceso de copiar y pegar.
El primero (y el más extraño, en mi opinión) es Project Screen Test, que está diseñado para facilitar el desarrollo y el uso de personajes generados por IA para contenido de video. En lugar de simplemente describir cómo debe verse y actuar el personaje en indicaciones de texto, la herramienta te permite hablar con el personaje y guiarlo en un entorno similar a un cuestionario. Comienza describiendo algunos rasgos básicos del personaje, como "ansioso, tímido, incómodo", y dándole una voz al personaje, ya sea seleccionando un ajuste preestablecido, describiendo cómo suena en un mensaje o cargando una muestra de audio como referencia.
Luego, puedes ampliar su personalidad con más detalle hablando con el personaje como si estuvieras hablando por FaceTime, describiendo su historia de fondo, su estado de ánimo, sus objetivos, sus defectos, sus miedos, sus peculiaridades motoras y más. Una vez que estés satisfecho, la herramienta te permite crear pruebas de pantalla animadas con el personaje describiendo el entorno o escenario en el que deseas ubicarlo.
Actualmente, este es un ejercicio creativo independiente y no está claro cómo (o si) podría demostrarse en cualquiera de las herramientas de vídeo de IA existentes de Adobe. Los resultados proporcionaron una personalidad más definida y consistente en comparación con muchos personajes animados de IA sin alma que he visto, pero esa es la razón por la que existen: la creación de videos con IA proporciona… lejos Menos control creativo en comparación con la animación tradicional, donde cada aspecto del personaje se incluye con absoluta intención.
También está Project Sight Span, que reformula fotografías convirtiéndolas en un entorno 3D por el que puedes moverte y reposicionar. El espacio 3D crea objetos y fondos fuera del marco original, pero parecen una parte natural de la imagen, incluso si giras para ver lo que hay detrás de ti. Si bien las imágenes en el entorno 3D están pixeladas y no están bien definidas, la calidad de la resolución se restaura cuando selecciona el ángulo elegido.
Sight Span funciona con cualquier imagen plana, incluidas fotografías, pinturas e ilustraciones, y puede preservar y replicar patrones artísticos. Incluso los tatuajes y rasgos faciales que han sido reposicionados en las imágenes siguen siendo sorprendentemente reconocibles y fieles a la referencia original. Es un poco como una versión de la función de reencuadre espacial de Apple con esteroides: puedes reposicionarlo de manera más agresiva y cambiar el punto de disparo por completo si lo deseas, pero también se siente menos digno de ser llamado foto en ese momento.
Project Sound Bender es una función de mezcla de audio impulsada por IA que te permite personalizar los efectos de sonido como si estuvieras haciendo clic con el mouse alrededor de una rueda de colores. Funciona cargando un vídeo y luego describiendo el sonido deseado en un mensaje de texto, como “sonidos de caldero burbujeante de ciencia ficción”. Luego, Sound Bender crea automáticamente efectos de sonido y los sincroniza con el video, y proporciona un panel de sonido cuadrado que le permite ajustar el ruido en tiempo real. Cada rincón del lienzo se asignará automáticamente con un sonido relevante generado por IA, como un gorgoteo denso con burbujas que explotan, rocas hirviendo rugientes, gotas que brotan y fuego eléctrico crepitante. Puedes arrastrar el cursor por el lienzo para seleccionar los sonidos más destacados o personalizar cada esquina con diferentes efectos de sonido.
Adobe también mostró Project Rinse Repeat, que le permite copiar ediciones y luego aplicarlas automáticamente a otros objetos o personas en la misma imagen. Por ejemplo, si está limpiando cuidadosamente el acné o las imperfecciones de una persona, Rinse Repeat adaptará sus cambios específicos a todos los demás miembros de un grupo de personas que necesitan retoques similares. También se puede utilizar para agregar sombras a productos en gráficos de marketing, incluso si los objetos tienen diferentes formas y tamaños. Rinse Repeat se basa en Photoshop y las ediciones que aplica a otros temas siguen siendo completamente editables porque la herramienta las recrea utilizando herramientas nativas de Photoshop.
Estos "furtivos" son avances técnicos de capacidades. puede Con el tiempo se convertirán en herramientas para las aplicaciones Adobe Creative Cloud o la plataforma Firefly, por lo que no hay garantía de que se amplíen hasta convertirse en funciones disponibles. Casi todos estos proyectos se basan en los avances de la IA generativa de Adobe, y dado que las herramientas de IA ahora desempeñan un papel central en la estrategia de crecimiento de la empresa, es probable que al menos algunos de los experimentos tengan un lanzamiento oficial. Por extraños o divertidos que puedan ser estos experimentos de IA, también son un mal augurio. Si es lo suficientemente útil, significa que la IA puede eventualmente reemplazar las herramientas y bibliotecas que los profesionales creativos utilizan actualmente, sin importar cuán sofisticadas sean sus opiniones sobre la tecnología.
Una de las características notables de estos avances es hacer que los procesos complejos de edición de fotografías, realización de películas y mezcla de audio parezcan más fáciles e intuitivos, adaptándolos a algo más interactivo y fácil de usar. En algunos casos, las funciones parecen casi un juego, pero con la ventaja de permitirle realizar cambios prácticos en proyectos creativos.
"Facilitar estas interacciones también significa brindar a los creadores experimentados un control más granular", dijo Gautham Mysore, científico investigador principal de Adobe. Borde. "La capacidad de Sound Bender para explorar audio y posicionar la cámara en Sight Span son ejemplos de cómo los profesionales pueden aplicar su criterio y optimizar el resultado de manera más directa. Esta conexión entre la intención creativa y el control es una gran parte de lo que estamos explorando".