A tecnologia de IA tornou-se uma mina de ouro digital para as indústrias. Sejam as postagens de blog criadas pelo ChatGPT ou as imagens realistas criadas pelo DALL-E, a precisão da IA está melhorando rapidamente, tornando difícil para os humanos reconhecerem a diferença.
Recentemente, a Tidio realizou uma pesquisa para testar quão bem as pessoas diferenciam entre conteúdo humano ou de IA. Este experimento testou os instintos humanos ao mostrar textos, imagens, músicas e obras de arte gerados por IA.
Surpreendentemente, os resultados foram totalmente inesperados, com mais de 87% dos entrevistados de alguns grupos adivinhando que uma imagem gerada por IA era uma foto humana real.
Se falarmos dos fanáticos por IA e aprendizado de máquina, cerca de 62% desses entrevistados deram respostas corretas para mais da metade das perguntas. Por outro lado, mais de 64% dos entrevistados restantes erraram na maioria das vezes.
Isso significa que a IA está pronta para substituir o trabalho humano em muitos campos? Vamos descobrir neste guia.
Alguns dos pontos principais que este guia aborda:
- A proporção de entrevistados que interpretaram erroneamente o conteúdo gerado por IA (imagens, música, texto e obras de arte) como criado por humanos.
- Quais métricas ou padrões os entrevistados usaram para dizer se o conteúdo era real ou feito por IA?
- Ameaças sérias de não aprender sobre os desenvolvimentos da IA.
- Como identificar conteúdo gerado por IA e evitá-lo.
Aqui estão os tópicos que discutiremos neste guia:
- Visão Geral Rápida da IA e Conceitos Básicos
- Principais Descobertas do Estudo
- Humano ou IA: Análise Detalhada dos Resultados do Teste
- Categoria I: Texto Criado por IA
- Categoria II: Imagens Feitas por IA
- Categoria III: Obras de Arte Projetadas por IA
- Categoria IV: Música Composta por IA
- Lições do Estudo: Jogo Humano ou IA
- Conclusão
Visão Geral Rápida da IA e Conceitos Básicos
Antes de discutirmos o teste humano ou de IA em profundidade, é importante revisar nossos conceitos sobre IA. Então, vamos passar rapidamente pela visão geral dos conceitos básicos de IA, aprendizado de máquina e aprendizado profundo:
- Inteligência artificial é o conjunto de habilidades que permitem a uma máquina simular o comportamento humano. Como o nome indica, é o processo de tornar uma máquina artificialmente inteligente.
- Aprendizado de máquina é uma solução avançada de IA que alimenta dados para máquinas para que elas aprendam as características e façam previsões.
- Aprendizado profundo é o ramo do aprendizado de máquina que trabalha com redes neurais artificiais (ANNs).
- Redes Generativas Adversariais usam uma arquitetura de aprendizado profundo onde duas redes neurais (conhecidas como geradoras e discriminadoras) são treinadas para superar uma à outra para gerar dados novos e genuínos a partir dos conjuntos de treinamento.
A maioria dos exemplos discutidos na pesquisa/estudo da Tidio usa GANs. O gerador primeiro analisa o conjunto de dados de imagem e depois tenta criar uma imagem aleatória. Posteriormente, o discriminador observa as características da imagem para verificar o quão real ela parece.
Por exemplo, para obter fotos de gatos geradas por IA, um enorme banco de dados de imagens de gatos foi fornecido a essas redes para análise. Na etapa seguinte, o gerador criou uma imagem aleatória de um gato, que foi então avaliada pelo discriminador para ver se correspondia ao gato original. Após melhorar a qualidade, ele forneceu imagens deste tipo:
Quase todas estas imagens parecem bastante convincentes. Mas se olhar com atenção, consegue ver alguns problemas com os fundos, caudas e coleiras.
Sabe porquê?
Isto aconteceu porque nem todos os gatos nas imagens usavam coleiras, mas a rede de IA criou uma fusão de todas as imagens onde a coleira se misturava visivelmente com o pelo.
Portanto, isto diz-nos que é possível detetar as diferenças, basta olhar com atenção.
O inquérito da Tidio mostrou que as pessoas eram boas a reconhecer imagens falsas de gatos em vez de imagens falsas de humanos, o que é surpreendente.
Vamos agora discutir que critérios os inquiridos usaram para identificar o conteúdo falso ou real.
Principais Conclusões do Estudo
A resposta típica dos inquiridos refletia que estavam "confusos". As pessoas comportaram-se como se não soubessem de nada, o que foi bastante extremo.
Alguns dos pontos interessantes que foram destacados pela Tidio são os seguintes:
- Cerca de 78% das pessoas que estavam confiantes nas suas respostas nem sequer responderam corretamente a metade das perguntas. Já a maioria dos inquiridos que não tinham a certeza obteve uma pontuação acima da média.
- A maioria dos inquiridos acreditava que conseguia distinguir facilmente se estava a comunicar com um chatbot ou com um humano. No entanto, só conseguiram responder corretamente 34% das vezes, o que indica que em breve será impossível notar qualquer diferença.
- Os inquiridos do sexo masculino adivinharam um pouco melhor as imagens, enquanto as do sexo feminino reconheceram melhor o toque humano na música.
- As pessoas familiarizadas com a tecnologia de IA e conceitos relevantes tiveram um desempenho melhor do que aquelas que não tinham ideia destas disciplinas.
- Os inquiridos mais jovens (Geração Z) avaliaram as imagens com mais precisão do que os baby boomers.
- As imagens modificadas por IA (imagens reais com filtros) foram mais difíceis de reconhecer do que as imagens geradas por IA.
Humano ou IA: Análise Detalhada dos Resultados do Teste
O conhecimento da tecnologia de IA e a familiaridade com os conceitos relevantes foram os fatores mais significativos na pontuação da investigação da Tidio.
A imagem abaixo representa a distribuição da pontuação para os inquiridos familiarizados com IA em comparação com os outros.
Um grande número de inquiridos sentiu que o teste era difícil, o que é bastante proeminente nos resultados, porque quase toda a gente cometeu um erro em alguma fase.
Vamos analisar cada categoria do inquérito para verificar os resultados e o desempenho.
Categoria I: Texto Criado por IA
Se não acredita que a IA pode escrever artigos, compor ensaios ou traduzir passagens, então precisa de fazer uma pesquisa rápida antes de continuar com as perguntas e resultados do inquérito.
No que diz respeito à escrita, tanto os humanos como a IA constroem sobre os mesmos blocos, o que torna bastante difícil identificar o texto da IA.
A experiência da Tidio testou quão bem as pessoas conseguem reconhecer um texto como sendo escrito por IA ou por um humano. O primeiro exemplo no inquérito foi a tradução de "Dom Quixote" por John Ormby, que foi marcada como gerada por IA por mais de metade (66%) das pessoas porque a consideraram estranha, difícil de seguir e ilógica.
Por outro lado, a tradução por IA das linhas de abertura de “Cem Anos de Solidão” foi identificada como tradução humana por 65% dos inquiridos.
No entanto, no caso de artigos de estilo de vida contemporâneos, a maioria dos inquiridos julgou corretamente. O inquérito incluiu duas passagens de teste sobre perda de peso, escritas por um jornalista humano e por uma IA comercial, respetivamente.
Quase 81,5% das pessoas identificaram o artigo original como sendo escrito por um humano, fazendo-o parecer mais um trabalho humano real do que o texto composto por IA (com apenas uma pontuação de convencimento de 36,9%).
Em resumo, muitos elementos diferentes de uma passagem de texto podem enganar as pessoas. Por exemplo, algo que está bem escrito e parece natural tem uma maior probabilidade de ser reconhecido como humano.
Categoria II: Imagens Feitas por IA
As imagens de IA parecem simples de identificar, mas os resultados do inquérito provaram o contrário. Foram testadas no inquérito imagens editadas com a FaceApp, fotos tiradas de ThisCatDoesNotExist e ThisPersonDoesNotExist, e imagens de stock.
Uma imagem gerada com a versão antiga do StyleGAN foi respondida incorretamente por 35,7% dos inquiridos, enquanto a imagem gerada com o StyleGAN2 melhorado enganou 68,3% dos inquiridos.
As pessoas familiarizadas com a tecnologia de IA adivinharam que a imagem era falsa e que tal pessoa não existe na vida real. No entanto, os restantes confundiram-na com uma pessoa real.
Mais de 23% das pessoas que adivinharam corretamente e disseram que não era um humano acreditavam que “parece pouco natural”. Fazer suposições simples e seguir a intuição nem sempre funciona, pois as aparências podem enganar.
Veja este exemplo oposto, que está rotulado incorretamente como uma imagem gerada por IA.
Cerca de 72% das pessoas disseram que foi gerada por IA apenas porque parecia pouco natural, quando na verdade era um humano real.
Embora algumas características geradas por IA sejam bastante identificáveis, há algumas coisas que devem ser tidas em conta.
Como Encontrar a Diferença entre Imagens de IA e Humanas
Aqui está uma lista de pontos que podem ajudar a diferenciar imagens de IA ou humanas:
- Os algoritmos de IA treinam com imagens não editadas e em bruto, enquanto as imagens fortemente editadas com photoshop ou transformadas são maioritariamente capturadas por humanos reais.
- A IA não consegue replicar completamente elementos incomuns e únicos, incluindo joias, roupas, estilo de maquilhagem, madeixas no cabelo, etc.
- As imagens originais tiradas por fotógrafos profissionais são mais nítidas e detalhadas do que as fotos não profissionais (que têm mais ruído), enquanto as imagens criadas por IA carecem de ambos.
- As imagens de IA têm rostos simétricos e olhos nivelados.
- Uma imagem cortada sem mãos, ombros ou penteado visíveis pode possivelmente ser gerada por IA.
- Algumas imagens de IA mostram cabelo despenteado, mas nem sempre é o caso.
- Quaisquer imperfeições na pele na imagem não refletem originalidade.
Se prestar atenção a estes detalhes, poderá avaliar as imagens com precisão. No entanto, com a velocidade a que a IA está a melhorar, nunca se pode estar completamente correto.
Categoria III: Obras de Arte Desenhadas por IA
As obras de arte geradas por IA são outra área plausível que pode gerar imagens atraentes em poucos segundos. Embora estes desenhos não sejam exibidos em exposições de arte famosas, têm um bom desempenho em certas áreas.
A obra de arte acima foi criada pelo ArtBreeder, que permite alterar certos elementos, como as condições meteorológicas ou o número de árvores.
Em termos de resposta, tanto os inquiridos do inquérito geral como os entusiastas de IA deram respostas erradas a esta obra de arte. Além disso, muitas pessoas não conseguiram dizer se era real ou gerada por IA, pois acharam difícil decidir.
Além de criar imagens do zero, gerar pinturas falsas de IA é agora possível com filtros.
Dê uma olhada na imagem real que foi usada no inquérito.
A imagem resultante, obviamente, não enganou a maioria dos inquiridos. No entanto, alguns até afirmaram que era feia.
Como Determinar a Originalidade de uma Obra de Arte
Aqui estão alguns pontos que podem ajudá-lo a distinguir se um desenho foi feito por um humano ou por IA.
- As obras de arte geradas por IA têm padrões em espiral que são fáceis de identificar.
- A IA processa formas e desenhos aleatoriamente.
- Fotos realistas com personagens humanos não podem ser desenhadas por IA.
- As obras de arte de IA não têm detalhes e carecem de complexidade.
- As obras de arte de IA são maioritariamente de baixa resolução.
- Os artistas humanos expressam mais detalhes nas suas pinturas.
Categoria IV: Música Composta por IA
A maioria dos inquiridos acreditava que a música era a mais difícil de identificar de todas as quatro categorias. De facto, os resultados estavam mais ligados às expectativas padrão das pessoas. Como resultado, quase 71,4% dos inquiridos adivinharam que uma faixa de EDM preparada por um humano era música gerada por IA.
Entretanto, 61,6% dos inquiridos confundiram uma canção como sendo composta por humanos, quando na verdade foi criada por IA após treinar com um par de canções dos Beatles. A perceção por trás das suposições incorretas foi que as pessoas associavam as canções caóticas aos humanos, e as complexas ou demasiado boas à tecnologia de IA inteligente.
Os dois testes de música eram faixas semelhantes com um toque clássico. Além disso, não havia elementos extra que pudessem distrair os inquiridos.
Aqui estão os resultados:
E aqui está o exemplo do original:
Outro exemplo enganou os inquiridos a um nível superior. Era música composta por IA e interpretada por músicos humanos. Cerca de 40% das pessoas adivinharam que tinha sido composta por um humano apenas porque soava como se tivesse sido interpretada por um humano.
No estado atual, a música de IA está longe de criar composições musicais dignas de um Tony. No entanto, pode tornar-se uma banda sonora para filmes ou videojogos.
Lições do Estudo: Jogo de IA ou Humano
As pessoas sempre estiveram com um pé atrás desde o surgimento da IA. Até um dos inquiridos expressou as suas preocupações depois de ser facilmente enganado pela IA.
Até certo ponto, as preocupações são genuínas. Qualquer pessoa com acesso a ferramentas de IA fáceis de usar pode gerar uma foto de perfil falsa para as redes sociais. Ou aplicar filtros de smartphone para realçar as características faciais ou transformar a aparência para enganar os outros.
Em particular, usar soluções de IA com o photoshop pode tornar-se uma ferramenta enganadora.
Veja esta imagem abaixo:
Aproximadamente 30% dos inquiridos acreditavam que a terceira imagem era real. Surpreendentemente, apenas 20% das pessoas conseguiram dar a resposta certa.
Aqui estão algumas lições chave a reter:
- A IA pode espalhar desinformação.
- É difícil identificar características ou mesmo transformações de género feitas por IA.
- A IA ainda tem um longo caminho a percorrer, e é mais difícil de usar do que outras técnicas tradicionais.
- A IA pode criar facilmente elementos específicos como rostos, mas as máquinas pensam de forma diferente, por isso falha na geração de figuras complexas.
Conclusão
O inquérito da Tidio testa a originalidade do conteúdo gerado por IA com base em quatro categorias. Quase 1800 pessoas participaram no inquérito, e a maioria delas ficou confusa ao distinguir entre conteúdo humano ou de IA. No entanto, a familiaridade com os conceitos de IA ajudou as pessoas a identificar algumas diferenças. Portanto, concluiremos dizendo que nem sempre é fácil identificar o conteúdo de IA, pois a IA está a tornar-se gradualmente mais aprimorada e semelhante aos humanos.
