Meet YOLO26: next-gen vision AI.

Link to this sectionRTDETRv2 与 PP-YOLOE+ 对比#

快速发展的计算机视觉领域已经产生了多种架构方法来解决复杂的实时目标检测挑战。其中最值得注意的近期进展是 RTDETRv2 和 PP-YOLOE+，这两个强大的模型从截然不同的设计理念出发进行视觉识别。尽管这两个模型都旨在提供高性能检测，但它们的底层机制、训练范式和理想部署场景存在显著差异。

这份综合指南深入探讨了这两个模型的技术细节，比较了它们的架构、性能指标和生态系统支持，旨在帮助开发者和研究人员为其特定部署需求选择最佳解决方案。

Link to this section模型概述#

在分析性能数据之前，了解每个模型的起源和架构目标非常重要。两者均源自百度的研究团队，但它们代表了目标检测家族树中不同的分支。

Link to this sectionRTDETRv2#

RTDETRv2 代表了基于 Transformer 的视觉架构的一次重大飞跃。它建立在原始实时检测 Transformer 的基础之上，利用了灵活的视觉 Transformer 主干网络并结合了高效的混合编码器。它最显著的特点是其原生的端到端预测能力，完全消除了后处理过程中对非极大值抑制（NMS）的需求。

作者：Wenyu Lv, Yian Zhao, Qinyao Chang, Kui Huang, Guanzhong Wang, and Yi Liu 机构：百度 日期：2024-07-24 Arxiv：2407.17140 GitHub：RT-DETR Repository

了解更多关于 RTDETRv2 的信息

Link to this sectionPP-YOLOE+#

PP-YOLOE+ 是 YOLO 系列的高级迭代版本，针对高性能工业应用进行了深度优化。它具有可扩展的 CNN 架构和无锚点（anchor-free）检测头。旨在提供卓越的速度与准确度权衡，它引入了 ET-head 和广义焦点损失函数（generalized focal loss）等强大技术，以改善小目标检测。

作者：PaddlePaddle Authors 机构：百度 日期：2022-04-02 Arxiv：2203.16250 GitHub：PaddleDetection Repository

了解更多关于 PP-YOLOE+ 的信息

生态系统集成

虽然这两个模型都有各自独立的研究仓库，但你可以直接在 Ultralytics Python 软件包中体验 RTDETRv2，从而受益于统一的 API 和简化的导出选项。

Link to this section架构差异#

这两个模型之间的根本区别在于它们如何处理视觉上下文并生成预测。

PP-YOLOE+ 使用了传统但经过高度优化的卷积神经网络（CNN）主干。它依赖局部感受野来提取特征，使其在标准部署中极其快速且高效。然而，它仍然需要标准的 NMS 后处理来过滤重叠的边界框，这可能会在密集场景中引入延迟瓶颈。

相反，RTDETRv2 采用了混合编码器和 Transformer 解码器。这使得模型能够同时捕捉整个图像的全局上下文。注意力机制天生理解物体之间的关系，使模型能够直接输出最终边界框而无需 NMS。这种端到端的方法确保了推断延迟的稳定性，而无需考虑检测到的物体数量。

Link to this section性能指标与对比#

在评估 YOLO 性能指标时，平衡准确度（mAP）、计算成本（FLOPs）和推断速度至关重要。下表重点展示了这两个模型在不同规模下的性能。

模型尺寸
(像素)		mAPval
50-95		速度
CPU ONNX
(ms)		速度
T4 TensorRT10
(ms)		参数量
(M)		FLOPs
(B)
RTDETRv2-s64048.1-5.032060
RTDETRv2-m64051.9-7.5136100
RTDETRv2-l64053.4-9.7642136
RTDETRv2-x64054.3-15.0376259
PP-YOLOE+t64039.9-2.844.8519.15
PP-YOLOE+s64043.7-2.627.9317.36
PP-YOLOE+m64049.8-5.5623.4349.91
PP-YOLOE+l64052.9-8.3652.2110.07
PP-YOLOE+x64054.7-14.398.42206.59

虽然 PP-YOLOE+x 在 COCO 数据集上实现了 54.7% 的略高 mAPval，但 RTDETRv2 模型通常提供具有竞争力的准确度，且由于其无 NMS 设计，还具有延迟一致性的额外优势。然而，PP-YOLOE+ 在较小模型的参数数量和 FLOPs 方面保持了严格的优势，使其在边缘部署中非常高效。

Link to this sectionUltralytics 的优势：了解 YOLO26#

虽然 RTDETRv2 和 PP-YOLOE+ 各自都很强大，但最先进的技术仍在不断发展。对于寻求速度、准确度和生态系统支持之间终极平衡的开发者来说，Ultralytics YOLO26 代表了新的行业标准。

YOLO26 综合了 CNN 和 Transformer 的最佳特性。它采用了现代架构首创的 End-to-End NMS-Free 设计，有效消除了后处理瓶颈。此外，它还引入了革命性的 MuSGD Optimizer，这是一种受 LLM 训练创新启发而来的混合方法，确保了高度稳定的训练和快速收敛。

针对边缘计算优化

与需要大量 CUDA 内存的重型 Transformer 模型不同，YOLO26 具有 DFL Removal（分布焦点损失移除）功能，并专门针对边缘计算进行了优化，与前几代相比，可提供高达 43% 的 CPU 推断提速。

此外，YOLO26 不仅限于简单的目标检测。它天生具有多功能性，开箱即支持实例分割、姿态估计和旋转边界框 (OBB)，而 PP-YOLOE+ 主要专注于边界框检测。

了解更多关于 YOLO26 的信息

Link to this section训练方法与生态系统#

训练效率和易用性是 Ultralytics 生态系统真正胜过独立研究仓库的地方。虽然 PP-YOLOE+ 依赖 PaddlePaddle 框架，而 RTDETRv2 通常需要复杂的环境设置，但通过 Ultralytics 集成模型提供了无缝的体验。

使用 Ultralytics API，你可以在训练期间受益于更低的内存需求、自动化数据处理和简化的超参数调整。此外，只需一条命令即可将模型部署为 ONNX 或 TensorRT 等生产格式。

Link to this section代码示例：精简推断#

下面演示了如何使用 Ultralytics Python 软件包轻松利用 RTDETRv2 以及推荐的 YOLO26 模型：

from ultralytics import RTDETR, YOLO

# Initialize the RTDETRv2 model
model_rtdetr = RTDETR("rtdetr-l.pt")

# Perform NMS-free inference on a test image
results_rtdetr = model_rtdetr("https://ultralytics.com/images/bus.jpg")
results_rtdetr[0].show()

# For superior speed and versatility, initialize the latest YOLO26 model
model_yolo26 = YOLO("yolo26n.pt")

# Train the YOLO26 model effortlessly with optimized memory usage
model_yolo26.train(data="coco8.yaml", epochs=50, imgsz=640)

# Export to TensorRT for edge deployment
model_yolo26.export(format="engine")

Link to this section实际应用与用例#

在这些架构之间做出选择通常取决于具体的硬件和应用需求。

  • RTDETRv2 在服务器端环境和复杂场景理解方面表现出色。其全局注意力机制使其在人群管理和密集的医学图像分析中非常有效，在这些场景中，重叠的对象通常会导致标准 NMS 算法失效。
  • PP-YOLOE+ 非常适合高速工业检测和深度投入 PaddlePaddle 生态系统的环境。它在较小规模下的低参数计数使其在某些机器人应用中具有可行性。
  • Ultralytics YOLO26 是全面商业部署的普遍推荐解决方案。凭借其增强的 ProgLoss + STAL 功能，它显著改善了对于空中无人机操作和智慧城市交通监控至关重要的小目标识别能力。

Link to this section应用场景与建议#

在 RT-DETR 和 PP-YOLOE+ 之间进行选择取决于你的具体项目需求、部署限制和生态系统偏好。

Link to this section何时选择 RT-DETR#

RT-DETR 在以下情况是一个强有力的选择：

  • 基于 Transformer 的检测研究： 探索注意力机制和 Transformer 架构以实现无 NMS 的端到端目标检测的项目。
  • 高精度、延迟要求宽松的场景： 将检测精度置于首位，且可以容忍稍高推理延迟的应用。
  • 大目标检测： 以中大型目标为主的场景，在这种场景下，Transformer 的全局注意力机制具有天然优势。

Link to this section何时选择 PP-YOLOE+#

建议使用 PP-YOLOE+ 的情况：

  • PaddlePaddle 生态系统集成： 现有基础设施基于 百度 PaddlePaddle 框架和工具的组织。
  • Paddle Lite 边缘部署： 部署到专门针对 Paddle Lite 或 Paddle 推理引擎高度优化的推理内核的硬件上。
  • 高精度服务器端检测： 在强大的 GPU 服务器上优先考虑最高检测精度，且框架依赖性不是主要考量的情况。

Link to this section何时选择 Ultralytics (YOLO26)#

对于大多数新项目，Ultralytics YOLO26 提供了性能和开发者体验的最佳组合：

  • 无 NMS 的边缘部署： 需要一致、低延迟推理且无需复杂非极大值抑制后处理的应用。
  • 仅 CPU 环境： 没有专用 GPU 加速的设备，YOLO26 带来的高达 43% 的 CPU 推理提速可提供决定性优势。
  • 小目标检测： 具有挑战性的场景，如 aerial drone imagery 或 IoT 传感器分析，其中 ProgLoss 和 STAL 可显著提升对极小目标的检测精度。

Link to this section结论#

RTDETRv2 和 PP-YOLOE+ 都拓展了计算机视觉的可能性边界，证明了 Transformer 和高度优化的 CNN 架构的可行性。然而，部署碎片化的研究代码库的复杂性可能会阻碍生产进度。

对于现代 AI 工程师来说，利用 Ultralytics 平台 提供了无与伦比的优势。通过迁移到如 YOLO11 或尖端的 YOLO26 等无缝集成模型，团队可以在大幅降低内存需求和开发开销的同时，实现尽可能高的准确度与速度比。

贡献者
GLglenn-jocher14PDpderrenger1

评论