Este robô bizarro usa IA para pintar o que você mandar –

A arte da IA ​​salta de pixels para telas da vida real com a ajuda de um braço robótico que é como Dall-E com um pincel.

Lembra dos velhos tempos? Quando ferramentas de IA como Dall-E e Stable Diffusion transformaram seus prompts de texto curtos em arte digital? Isso é tão 2022…

Conheça Frida, um robô controlado por IA da Carnegie Mellon University que transforma suas sugestões em pinturas físicas, completas com pinceladas ousadas em uma variedade de técnicas. Talvez o mais impressionante seja que o bot pode mudar de curso enquanto pinta para imitar a natureza iterativa de fazer arte.

“Ele trabalhará com suas falhas e alterará seus objetivos”, disse Peter Schaldenbrand, Ph.D. aluno da Escola de Ciência da Computação da CMU e um dos criadores do robô, disse em um vídeo descrevendo o projeto.

Frida pretende explorar a interseção entre robôs e criatividade, diz a equipe, que apresenta seu trabalho de pesquisa em maio na Conferência Internacional IEEE sobre Robótica e Automação em Londres. Os robôs já produziram arte antes e até a exibiram. Mas Frida foi projetada expressamente para colaborar com humanos usando o mesmo tipo de inteligência generativa que impulsiona ferramentas experimentais como o AI chatbot ChatGPT.

Frida significa Iniciativa de Estrutura e Robótica para Artes em Desenvolvimento, mas também compartilha um nome com a famosa pintora Frida Kahlo. A máquina pronta para uso, encontrada em um porão, não se parece em nada com Kahlo ou qualquer outro ser humano. Por enquanto, é simplesmente um braço robótico com um pincel afixado, uma configuração que ressalta a insistência da equipe de que Frida é um “sistema de pintura robótica, não uma artista”.

“Frida não está gerando ideias para se comunicar”, disse Schaldenbrand. É aí que entram os humanos, comunicando metas para Frida com entradas de texto. Eles também podem mostrar as imagens do bot em um estilo que gostem ou até mesmo fotos em flash que desejam ver representadas como uma pintura. Os pesquisadores estão até brincando com prompts de áudio (eles tocaram a música Dancing Queen, do ABBA, uma excelente escolha, e pediram a Frida para pintá-la). Frida sugere cores de tinta apropriadas na tela, então os humanos as misturam na paleta do robô.

“Frida pode ajudar alguém que enfrenta barreiras físicas para criar arte visual”, disse-me Schaldenbrand. “Frida também pode ajudar as pessoas que não têm tempo para se dedicar à arte, pois pode automatizar alguns dos elementos tediosos. Agora estamos avançando e trabalhando com as pessoas para ver o alcance das capacidades de Frida.”

Frida provavelmente nunca alcançará o renome de seu homônimo, mas algumas habilidades impressionantes o diferenciam de outros robôs artísticos, cujas imagens de entrada geralmente correspondem ao seu objetivo final. Criar arte é um processo dinâmico e em constante evolução e, após planejar sua trajetória em um ambiente simulado, Frida usa aprendizado de máquina para avaliar e progredir em tempo real. O robô faz seu planejamento, como o professor de robótica da CMU James McCann observa no vídeo, “em um espaço de significado em vez de um espaço de resultados”.

Frida não valoriza a precisão como a maioria dos robôs e pode, por exemplo, incorporar um “erro” como uma mancha errante de tinta em seu produto final. Cada pintura leva horas para ser concluída e os resultados costumam ser caprichosos e coloridos.

“Há uma pintura de uma bailarina sapo que eu acho que ficou muito bem”, disse Schaldenbrand. “É realmente bobo e divertido, e acho que a surpresa do que Frida gerou com base na minha opinião foi muito divertida de ver.”

Para treinar seus múltiplos componentes de IA, a equipe inseriu manchetes de notícias atuais e os treinou ainda mais em imagens e textos representativos de diversas culturas para evitar um viés americano ou ocidental.

O papel da IA ​​na geração de arte visual, compondo músicas e até mesmo escrevendo poesia e roteiros de filmes está gerando entusiasmo, mas também levantando questões éticas e de direitos autorais entre artistas e advogados. A arte da IA ​​não é criada no vácuo. Funciona absorvendo e reconstruindo a arte existente criada por humanos. À medida que a arte feita à máquina melhora, esses humanos – designers gráficos, ilustradores, compositores e fotógrafos reais – ficarão sem trabalho?

Alguns artistas com quem conversei descrevem que se sentem nervosos com as questões complexas levantadas pela arte da IA. Outros – como Steve Coulson, um ávido fã de quadrinhos que escreveu uma série desenhada inteiramente por Midjourney – estão adotando o que consideram uma mudança inevitável. Os artistas de quadrinhos que Coulson adora há muito tempo “têm um olho para composição dramática e narrativa dinâmica que duvido muito que o aprendizado de máquina seja capaz de igualar”, diz Coulson. “Mas como uma ferramenta de visualização para não artistas como eu, é muito divertido.”

Os inventores de Frida compartilham uma perspectiva semelhante.

O bot armado, diz o trabalho de pesquisa, “é uma iniciativa de robótica para promover a criatividade humana, em vez de substituí-la, fornecendo maneiras intuitivas para os humanos expressarem suas ideias usando linguagem natural ou imagens de amostra”.

Nota dos editores: a está usando um mecanismo de IA para criar alguns explicadores de finanças pessoais que são editados e verificados por nossos editores. Para saber mais, veja este post.