Illustration for article showing Gen AI is ineffective in 95% of cases.

As ações da AI, as empresas de tecnologia da IA caíram em valor no final das negociações ontem, com o índice de composto da NASDAQ em queda de 1,4%. Entre os que perderam o valor estavam Palantir, queda de 9,4% e as participações de braço em queda de 5%. De acordo com o Times financeiros (Paywall), terça-feira viu a maior queda de um dia no mercado desde o início de agosto.

Alguns comerciantes colocaram as quedas em um relatório divulgado (PDF) por uma empresa de IA, Nanda, que observou a alta taxa de falhas de muitos projetos generativos de IA em organizações comerciais. O Projeto Nanda se originou no Instituto de Mídia do Instituto de Tecnologia de Massachusetts e se descreve como uma organização que está construindo uma “Web Agentic”. O artigo, desde a publicação, foi colocado atrás de uma parede de pesquisa, mas está disponível para download deste site.

Os autores de pesquisa afirmam apenas 5% dos pilotos da Gen AI alcançam a produção e, na verdade, produzem valor monetário mensurável, com a grande maioria dos projetos criando pouco impacto nas métricas de lucro e perdas. A pesquisa realizada por Nanda composta pelo conteúdo de 52 entrevistas estruturadas com tomadores de decisão corporativos, análise dos pesquisadores de mais de 300 iniciativas e anúncios públicos de IA públicos e um questionário de pesquisa concluído por 153 líderes da empresa. Mediu o retorno do investimento mais de seis meses depois que os projetos da Gen AI deixaram o status do piloto.

Enquanto muitas organizações implantam a IA nas funções comerciais de frente ou voltadas para o cliente, projetos de sucesso tendem a ser encontrados entre os fluxos de trabalho de back-office, diz o jornal. Está nas tarefas mundanas do back office, onde as economias são acumuladas, em grande parte de uma necessidade reduzida de agências e BPOs de terceiros. A pesquisa constatou que houve pouco impacto pelos projetos de IA nos níveis gerais de pessoal interno.

Embora 90% da equipe declarassem que se beneficiaram pessoalmente do uso de AIs disponíveis ao público, normalmente na forma de grandes modelos de idiomas como o ChatGPT, esses ganhos subjetivos não são traduzidos no nível da instituição. Cerca de 40% das empresas pesquisaram o pagamento por uma assinatura da LLMS.

Muitos dos proprietários dos projetos fracassados citaram a falta de conscientização contextual exibida por modelos generativos de IA – ou seja, se adaptando às circunstâncias, mudando com o tempo e lembrando as perguntas anteriores. Nanda afirma que a formação de uma parceria com uma organização que pode fornecer esse sistema e garantir que ela se adapte às circunstâncias específicas de uma organização é o elemento crítico para o sucesso. O artigo destaca várias citações “derivadas de entrevistas”, que incluem entre 60% a 70% de concordância com as declarações, “(o sistema de IA) não aprende com nosso feedback” e “muito contexto manual exigido a cada vez”.

O vertical mais afetado positivamente pela Gen AI foi a Media & Telecom, seguida por serviços profissionais, saúde e farmacêuticos, consumidores e varejo e serviços financeiros. Atualmente, a taxa do setor de energia e materiais do lançamento generativo do projeto de IA é insignificante, diz o artigo. Em termos de unidades de negócios, as vendas e marketing são onde a maioria dos projetos se baseia, com finanças e compras menos populares como um local onde os projetos de IA podem ser iniciados.

A área de uma organização típica em que a IA generativa é mais implantada é em vendas e marketing, com finanças e compras sendo o site menos popular. E tarefas complexas são mais propensas a serem concluídas pela IA; Os gerentes atribuiriam projetos como o gerenciamento de clientes a uma IA apenas 10% das vezes, enquanto tarefas como resumir um relatório ou escrever um email iriam para um humano em 70% das ocasiões.

O idioma do relatório publicado e sua falta de rigor acadêmico sugerem que sua proveniência e propósito são mais parecidos com o marketing do que a discussão intelectual e tecnológica. Os autores do artigo pedem parcerias estratégicas com um fornecedor experiente para aumentar as chances de o sucesso dos projetos de IA generativos, uma parceria que Nanda é, puramente coincidentemente, capaz de formar metade de. Existem “oportunidades sem precedentes para os fornecedores que podem oferecer sistemas de IA com capacidade de aprendizagem e profundamente integrados”, afirmam as conclusões do artigo.

As manchetes do relatório Nanda fazem com que a leitura preocupante entre os tomadores de decisão encarregados de implementações generativas de IA, mas as mensagens subjacentes do artigo são enfraquecidas pelas intenções por trás de sua publicação. Os preços das ações nesta semana poderiam ter sido afetados por pesquisas partidárias de autores com pele óbvia no jogo, mas parece mais provável que a publicação de Nanda simplesmente reflita as preocupações dos andares de negociação sobre a eficácia prática da IA generativa como uma ferramenta de negócios.

(Fonte da imagem: “Arthur Daley”, de Tim Dennell, é licenciado no CC BY-NC-ND 2.0.)

Fontesartificialintelligence

Deixe um comentário

O seu endereço de e-mail não será publicado. Campos obrigatórios são marcados com *