A Amazon disse a seus engenheiros que contar o quanto eles usam IA é uma forma ruim de medir seu trabalho. Em um memorando publicado na terça-feira, a empresa afirmou que o uso de tokens, a adoção de ferramentas de IA e a contagem de alterações no código são formas "profundamente falhas" de avaliar como os engenheiros trabalham com IA. O memorando veio acompanhado de uma diretriz atualizada para o cargo de engenheiro de desenvolvimento de software.
Terk Terkowitz, vice-presidente e engenheiro distinto da Worldwide Amazon Stores, assinou o memorando. A Amazon o compartilhou com a equipe pela primeira vez em setembro, informou a CNBC.
"Se o seu trabalho não se beneficia das ferramentas atuais de IA, isso é uma constatação, não uma falha", escreveu Terkowitz, segundo o memorando.
Por que a Amazon alerta engenheiros contra o tokenmaxxing?
O memorando tem como alvo uma prática que a empresa chama de tokenmaxxing, que ela descreve como usar a IA o máximo possível com pouca atenção aos resultados. A Amazon utilizou métricas de entrada, incluindo o uso de tokens e a adoção de ferramentas de IA, e também contabilizou alterações e revisões de código. O memorando alerta que, se as equipes tratarem esses números como metas em vez de medidas, os custos e a complexidade podem aumentar.
O memorando relaciona sua posição aos princípios de liderança da Amazon. Ele afirma que o tokenmaxxing está em desacordo com a frugalidade e que medir linhas de código vai contra o princípio de inventar e simplificar.
A mudança segue um problema anterior. A Amazon desativou um ranking interno em maio, após constatar que funcionários estavam praticando tokenmaxxing para subir nas posições, segundo a CNBC. Um porta-voz da Amazon disse à CNBC que a empresa não limitou o uso de tokens pelos funcionários.
Quais métricas de uso de IA a Amazon monitorava antes do memorando?
A Business Insider informou que a Amazon acompanhava o uso de IA pelos engenheiros, o consumo de tokens e as linhas de código, além de usar rankings para classificar algumas equipes. De acordo com o veículo, esses programas geraram atritos entre alguns funcionários.
A Amazon ainda usa métricas de uso de IA?
O memorando não orienta os engenheiros a abandonar completamente as métricas. Ele afirma que elas têm boa correlação com os resultados que importam e que os engenheiros devem usá-las com cuidado e bom senso.
A Amazon chama seus grupos mais intensivos em IA de equipes de fronteira. O memorando diz que essas equipes apresentam maior produtividade e entregas, enquanto equipes e indivíduos que não adotam IA estão ficando para trás. Ele pede que os gestores estudem os 10% das equipes com menor adoção de IA para descobrir o motivo, e verifiquem se os 10% mais bem colocados entregam mais para igualar o desempenho.
Os líderes também devem usar as ferramentas no trabalho de produção. Eles precisam ser capazes de descrever uma tarefa em que a IA ajudou e outra em que não ajudou.
"Temos certeza de que, quaisquer que sejam as melhores práticas futuras, a IA estará no centro da prática de engenharia de software", afirma o memorando.
Marc Brooker, vice-presidente e engenheiro distinto da Amazon Web Services, disse à CNBC que a empresa analisou medidas como a velocidade de funcionalidades, que inclui quantos lançamentos as equipes fazem e quantas alterações bem-sucedidas chegam à produção. "O que não queremos ver é esforço desperdiçado, em que estamos gastando esses tokens para resolver problemas que não importam", disse Brooker.
Outras empresas também mudaram a forma como lidam com os gastos com IA este ano. A Microsoft definiu orçamentos de IA por divisão em agosto, e o diretor de tecnologia da Uber disse que a era do tokenmaxxing está chegando ao fim. A Accenture limitou os gastos da equipe com o Claude a US$ 29 por mês neste mês, informou a 404 Media.
Este artigo foi escrito com a assistência de IA.
News Factory APP - notícias agênticas para impulsionar seu SEO e AEO.