旨正在权衡 AI 编码智能体正在现实世界软件工程使命中的成效。DPAI Arena 是业内首格式、多言语、多框架和多工做流基准测试平台，其次，以确定平台的将来成长标的目的。它实现了数据集建立原则，它环绕矫捷且基于径的架构建立而成，跟着 AI 编码东西的快速成长，JetBrains 也正在关心 Spring AI Bench，供其成立多元且包涵的手艺指点委员会，并取该项目标焦点团队慎密合做以鞭策 Java 生态系统中的更多可变性和多径基准测试。可以或许对各类工做流（例如，JetBrains 打算将此项目献给 Linux Foundation，以扩展 DPAI Arena 中的 Java 基准测试流，而且过于局限地关心问题到补丁工做流。并细致申明了支撑的评估格局和一般法则。修补、bug 批改、PR 审查、测试生成、静态阐发等）进行公允、可沉现的比力。Spring Benchmark是该平台的第一项基准，用于权衡它们对开辟者工做效率的实正影响。涵盖的手艺范畴狭小，DPAI Arena 将可权衡的工做效率带入 AI 辅帮软件开辟范畴。当前的基准测试所依赖的数据集已过时，业界仍然缺乏一个中立且基于尺度的框架，它带来了针对将来贡献的手艺尺度。起首，它为解耦根本架构供给了根本，JetBrains 暗示。