{"id":660250,"date":"2025-11-19T02:32:46","date_gmt":"2025-11-19T01:32:46","guid":{"rendered":"https:\/\/blog.jetbrains.com\/?post_type=blog&p=660250"},"modified":"2025-11-19T02:37:26","modified_gmt":"2025-11-19T01:37:26","slug":"lancamento-da-developer-productivity-ai-arena-uma-plataforma-aberta-para-benchmarks-de-agentes-de-programacao-por-ia","status":"publish","type":"blog","link":"https:\/\/blog.jetbrains.com\/pt-br\/blog\/2025\/11\/19\/lancamento-da-developer-productivity-ai-arena-uma-plataforma-aberta-para-benchmarks-de-agentes-de-programacao-por-ia\/","title":{"rendered":"Lan\u00e7amento da Developer Productivity AI Arena, uma plataforma aberta para benchmarks de agentes de programa\u00e7\u00e3o por IA"},"content":{"rendered":"

Durante 25 anos, a JetBrains vem dando forma ao cen\u00e1rio do desenvolvimento de software em diversas linguagens de programa\u00e7\u00e3o e fazendo progredir o modo como desenvolvedores e organiza\u00e7\u00f5es criam software. Nosso foco sempre foi em melhorar a produtividade e a experi\u00eancia geral dos desenvolvedores.<\/p>\n

Com a ascens\u00e3o da IA, agora um grande desafio \u00e9 compreender como medir no mundo real os ganhos de produtividade proporcionados pelas ferramentas assistidas por IA. Tentando responder a esse desafio, a JetBrains decidiu criar a Developer Productivity AI Arena (DPAI Arena)<\/strong> e eventualmente torn\u00e1-la uma contribui\u00e7\u00e3o \u00e0 Linux Foundation.<\/p>\n

\n
\n

“\u00c0 medida que os agentes de programa\u00e7\u00e3o por IA se tornam partes integrais do moderno desenvolvimento de software, o setor precisa urgentemente de uma maneira transparente e confi\u00e1vel de medir o real impacto desses agentes na produtividade dos desenvolvedores. A DPAIA cria um framework aberto e independente dos fornecedores para avaliar o desenvolvimento assistido por IA nas v\u00e1rias linguagens, frameworks e ambientes.<\/p>\n

Convidamos os fornecedores de agentes de programa\u00e7\u00e3o e de frameworks a se juntarem a esta iniciativa e ajudarem a dar forma aos benchmarks que definir\u00e3o a pr\u00f3xima era da cria\u00e7\u00e3o de software. E encorajamos os usu\u00e1rios finais a participarem, validando as ferramentas de IA em suas cargas de trabalho do mundo real, garantindo o progresso do ecossistema sobre uma base de abertura, confian\u00e7a e impactos mensur\u00e1veis.”<\/p>\n<\/blockquote>\n

\n
\n Mark Collier<\/strong>
\n Gerente-Geral de IA e Infraestrutura da Linux Foundation<\/span>\n <\/div>\n<\/p><\/div>\n<\/p><\/div>\n

A DPAI Arena \u00e9 a primeira plataforma aberta de benchmarking, com suporte a v\u00e1rias linguagens, frameworks e fluxos de trabalho, e projetada para medir a efic\u00e1cia dos agentes de programa\u00e7\u00e3o por IA em tarefas de engenharia de software no mundo real. A plataforma foi criada em torno de uma arquitetura flex\u00edvel e baseada em trilhas, e permite compara\u00e7\u00f5es justas e reproduz\u00edveis em diversos fluxos de trabalho, tais como patching, corre\u00e7\u00e3o de bugs, revis\u00e3o de solicita\u00e7\u00f5es de pull, gera\u00e7\u00e3o de testes, an\u00e1lise est\u00e1tica e muito mais.<\/p>\n

O benchmarking redefinido<\/strong><\/h3>\n

Os benchmarks atuais dependem de conjuntos de dados desatualizados, cobrem uma variedade pequena de tecnologias e se concentram muito fortemente em fluxos de trabalho de problemas a corrigir. Com o progresso r\u00e1pido das ferramentas de programa\u00e7\u00e3o por IA, o setor ainda carece de um framework neutro e baseado em padr\u00f5es para medir o real impacto dessas ferramentas na produtividade dos desenvolvedores.\u00a0<\/p>\n

\n
\n

“A JetBrains passou mais de duas d\u00e9cadas criando ferramentas que ajudam dezenas de milh\u00f5es de desenvolvedores a pensarem criticamente, criarem c\u00f3digo com confian\u00e7a e inovarem rapidamente. Isso nos d\u00e1 uma compreens\u00e3o \u00fanica do potencial e da press\u00e3o que a IA est\u00e1 colocando atualmente no mundo do desenvolvimento de software. Vemos em primeira m\u00e3o como as equipes est\u00e3o tentando conciliar ganhos de produtividade com qualidade, transpar\u00eancia e confiabilidade do c\u00f3digo. Enfrentar esses desafios requer mais que benchmarks de desempenho.
\nA Developer Productivity AI Arena foi projetada para trazer claridade e responsabiliza\u00e7\u00e3o, para avaliar e aperfei\u00e7oar os agentes de programa\u00e7\u00e3o por IA de forma consistente e colaborativa, e para ajudar o setor a visualizar e at\u00e9 medir a diferen\u00e7a entre uma IA que apenas acelere o trabalho e uma que realmente o compreenda e facilite. Ao definirmos um framework compartilhado para benchmarks de agentes por IA, desejamos promover a transpar\u00eancia e a confian\u00e7a em todo o sistema de IA. “<\/p>\n<\/blockquote>\n

\n
\n Kirill Skrygan<\/strong>
\n CEO da JetBrains<\/span>\n <\/div>\n<\/p><\/div>\n<\/p><\/div>\n

A DPAI Arena preenche essa lacuna, atrav\u00e9s de pipelines transparentes de avalia\u00e7\u00e3o, infraestrutura reproduz\u00edvel e conjuntos de dados extens\u00edveis, orientados pela comunidade e com diversas trilhas.<\/p>\n

Medindo o que importa<\/strong><\/h3>\n

A DPAI Arena traz a produtividade mensur\u00e1vel para o mundo do desenvolvimento de software assistido por IA. Os fornecedores de ferramentas de IA poder\u00e3o fazer benchmarks e refinar suas ferramentas com tarefas do mundo real; os fornecedores de tecnologia poder\u00e3o garantir que seus ecossistemas sejam de primeira linha, contribuindo com benchmarks espec\u00edficos de cada dom\u00ednio; as empresas ganhar\u00e3o uma maneira confi\u00e1vel de avaliar ferramentas antes de adot\u00e1-las e os desenvolvedores obter\u00e3o insights transparentes sobre o que realmente aumenta a produtividade.<\/p>\n

A DPAI Arena foi criada para dar condi\u00e7\u00f5es a todos de contribu\u00edrem para o futuro da programa\u00e7\u00e3o com IA. O primeiro benchmark da plataforma, o Spring Benchmark, introduz o padr\u00e3o t\u00e9cnico para futuras contribui\u00e7\u00f5es. Primeiramente, ele implementa as diretrizes para a cria\u00e7\u00e3o de conjuntos de dados e detalha os formatos de avalia\u00e7\u00e3o com suporte e as regras gerais. Depois, ele oferece uma base s\u00f3lida para uma infraestrutura desacoplada, permitindo que todos tragam seus pr\u00f3prios conjuntos de dados (abordagem BYOD) e reutilizem a infraestrutura para suas pr\u00f3prias avalia\u00e7\u00f5es.<\/p>\n

Tamb\u00e9m estamos estudando o Spring AI Bench<\/a> para ampliar o fluxo de benchmarking em Java na DPAI Arena, colaborando de forma estreita com a equipe central do projeto para estimular mais varia\u00e7\u00e3o e benchmarks de v\u00e1rias trilhas em todo o ecossistema do Java.<\/p>\n

Junte-se \u00e0 DPAI Arena<\/strong><\/h3>\n

Pretendemos transformar este projeto em uma contribui\u00e7\u00e3o \u00e0 Linux Foundation, que ent\u00e3o criar\u00e1 um Comit\u00ea de Dire\u00e7\u00e3o T\u00e9cnica, diverso e inclusivo, que determinar\u00e1 a dire\u00e7\u00e3o futura da plataforma.\u00a0<\/p>\n

Acompanhe o progresso da plataforma em https:\/\/dpaia.dev\/<\/a>. Para mais informa\u00e7\u00f5es, consulte nossa Vis\u00e3o Geral do Projeto<\/a> ou o GitHub org<\/a>.<\/p>\n\n\n

Artigo original em ingl\u00eas por:<\/em><\/p>\n\n\n

\n
\n
\n
\n \"Arun\n <\/div>\n
\n

Arun Gupta<\/h4>\n

Arun Gupta is a globally recognized expert in developer relations, open source strategy, and go-to-market innovation. He is the VP of Developer Experience at JetBrains, leading the effort to connect with the global developer community and external partners. With over 25 years of experience at Intel, Apple, Amazon, and Red Hat, he\u2019s built developer communities that drive adoption and aligned DevRel with product, marketing, and sales to create lasting champions. Arun advocates mindfulness, kindness, and developer empathy as the foundation of modern DevRel.<\/p>\n

He chaired the CNCF and OpenSSF governing boards, leading ecosystem growth and open source security initiatives. Arun also helped Fortune 100 companies embrace open collaboration through founding multiple open source program offices. A global speaker and author, Arun has keynoted in 50+ countries, is a Docker Captain and Java Champion, and founded Devoxx4Kids USA. He actively leads initiatives like TEDAI and the UN\u2019s Tech Over Hackathon.<\/p>\n <\/div>\n <\/div>\n <\/div>\n <\/div>\n","protected":false},"author":1086,"featured_media":660255,"comment_status":"closed","ping_status":"closed","template":"","categories":[8899,89],"tags":[6847,8724,8946,6717],"cross-post-tag":[],"acf":[],"_links":{"self":[{"href":"https:\/\/blog.jetbrains.com\/pt-br\/wp-json\/wp\/v2\/blog\/660250"}],"collection":[{"href":"https:\/\/blog.jetbrains.com\/pt-br\/wp-json\/wp\/v2\/blog"}],"about":[{"href":"https:\/\/blog.jetbrains.com\/pt-br\/wp-json\/wp\/v2\/types\/blog"}],"author":[{"embeddable":true,"href":"https:\/\/blog.jetbrains.com\/pt-br\/wp-json\/wp\/v2\/users\/1086"}],"replies":[{"embeddable":true,"href":"https:\/\/blog.jetbrains.com\/pt-br\/wp-json\/wp\/v2\/comments?post=660250"}],"version-history":[{"count":4,"href":"https:\/\/blog.jetbrains.com\/pt-br\/wp-json\/wp\/v2\/blog\/660250\/revisions"}],"predecessor-version":[{"id":660266,"href":"https:\/\/blog.jetbrains.com\/pt-br\/wp-json\/wp\/v2\/blog\/660250\/revisions\/660266"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/blog.jetbrains.com\/pt-br\/wp-json\/wp\/v2\/media\/660255"}],"wp:attachment":[{"href":"https:\/\/blog.jetbrains.com\/pt-br\/wp-json\/wp\/v2\/media?parent=660250"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/blog.jetbrains.com\/pt-br\/wp-json\/wp\/v2\/categories?post=660250"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/blog.jetbrains.com\/pt-br\/wp-json\/wp\/v2\/tags?post=660250"},{"taxonomy":"cross-post-tag","embeddable":true,"href":"https:\/\/blog.jetbrains.com\/pt-br\/wp-json\/wp\/v2\/cross-post-tag?post=660250"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}