Ultralytics YOLO27:
Get Started

Ultralytics 基准测试#

COCO 无法代表许多真实世界的计算机视觉任务。Ultralytics 基准测试是一套基准数据集,用于衡量模型在 37 个经过筛选的目标检测数据集上的泛化能力,这些数据集都带有高质量的边界框标注。数据领域涵盖医学图像分析、遥感、交通、文档、用户界面、零售、机器视觉、农业、体育、野生动物、水下成像和废弃物检测。传感器类型包括 RGB、鱼眼、热红外、X 射线、MRI、超声、显微成像和合成孔径雷达 (SAR)。

经过筛选的数据集托管在 Ultralytics Platform 上。

我们检查了候选数据集在训练集和验证集划分中是否存在完全重复或近似重复的图像。我们对标记出的图像对进行了审核,并移除了确认存在数据集划分泄漏的图像,或替换了受影响的数据集。

数据集#

领域传感器 / 影像类型数据集类别
航空影像/遥感RGB 卫星影像Airbus 储油罐检测1:储油罐
文档/用户界面RGB 图像和扫描页面AnnoPage 文档元素25 类:化学式/方程式、符号/标志、照片、绘图、图表、地图、数学表达式、乐谱、图像、装饰、铭文、平面图、条形码/二维码、印章、广告、手写便条、示意图、表格、插图和饰带
体育RGB 相机篮球篮筐检测2 类:篮球、篮球网
驾驶/交通RGB 道路摄像头CEYMO11 类:公交车道、自行车道、菱形标记、接线盒、左转箭头、人行横道、右转箭头、直行箭头、减速、直行并左转箭头、直行并右转箭头
医疗MRICheng 脑肿瘤 MRI3 类:脑膜瘤、胶质瘤、垂体瘤
医疗彩色眼底相机DDR 病灶4 类:硬性渗出物、出血、微动脉瘤、软性渗出物
工业线扫描工业相机DeepPCB6 类:开路、短路、鼠咬、毛刺、铜箔、针孔
医疗牙科 X 射线DENTEX4 类:阻生牙、龋齿、根尖周病变、深龋
工业RGB 工业相机DSPCBSD9 类:短路、毛刺、铜箔异物、开路、鼠咬、孔洞破损、导线划伤、导线异物、基材异物
其他RGB 第一人称视角相机EgoHands4 类:自己的左手、自己的右手、他人的左手、他人的右手
其他RGB 和红外野外相机ENA2422 个野生动物、人物、家畜和车辆类别
驾驶/交通RGB 鱼眼相机Fisheye8K5 类:公交车、自行车、汽车、行人、卡车
文档/用户界面数字版和扫描版平面图FloorPlanCAD30 个类别,涵盖建筑开口、家具、电器、卫浴设施、楼梯、电梯和自动扶梯
医疗X 射线GRAZPEDWRI-DX9 类:骨异常、骨病变、异物、骨折、金属、骨膜反应、旋前征、软组织、文本
文档/用户界面数字截图GroundCUA 用户界面9 类:按钮、信息显示、输入元素、菜单、导航、其他、侧边栏、视觉元素、未知
农业RGB 野外相机GWHD 20211 类:麦穗
航空影像/遥感热红外无人机HIT-UAV5 类:人物、汽车、自行车、其他车辆、忽略区域
医疗安检 X 射线IED X 射线11 个类别,涵盖爆炸物、电池、笔记本电脑、寻呼机、手机、对讲机和改装设备
医疗RGB 内窥镜Kvasir-SEG 息肉1 类:息肉
驾驶/交通热红外LLVIP1 类:人物
航空影像/遥感8 波段多光谱影像MODA 多光谱8 类:汽车、厢式货车、卡车、公交车、三轮车、自行车、带遮阳篷的自行车、行人
农业RGB 相机PlantDoc29 个作物叶片和植物病害类别
体育RGB 视频帧RacketVision 网球1 类:网球
驾驶/交通RGB 道路摄像头RDD20225 类:纵向裂缝、横向裂缝、龟裂、其他路面损坏、坑洞
零售RGB 收银台摄像头RPC 零售结账200 个收银商品类别,涵盖包装食品、饮料、牛奶、罐头食品、巧克力、口香糖、糖果、调味品、卫生用品、纸巾和文具
其他RGB 水下相机RUOD 水下数据集10 类:海参、海胆、扇贝、海星、鱼、珊瑚、潜水员、乌贼、海龟、水母
工业RGB 相机Safe Human 1717 个人物、身体部位、工具和个人防护装备类别
航空影像/遥感RGB 无人机相机SeaDronesSee6 类:忽略、游泳者、船、摩托艇、救生设备、浮标
零售RGB 零售摄像头SKU-110K1:货架商品
体育RGB 广播摄像机SoccerDB3:球员、球、球门
航空影像/遥感合成孔径雷达 (SAR)SSDD SAR Ship1:船舶
其他RGB 相机TACO Litter28 类垃圾材料和物品
医疗胸部 X 光片TBX11K2:活动性肺结核、陈旧性肺结核
医疗超声TN5000 Thyroid Ultrasound2:良性、恶性
医疗光学显微镜TXL-PBC Blood Cells3:白细胞、红细胞、血小板
其他RGB 相机UEC School Lunch Food21 类学校午餐食品和饮料
航空影像/遥感RGB 无人机相机VisDrone10:行人、人群、自行车、汽车、面包车、卡车、三轮车、载货三轮车、公交车、摩托车

评估#

  • 从每个训练划分中最多抽取 1,000 张图像,保留完整的验证划分,并使用 fraction=[1000, 1.0, 0.0] 排除测试划分。
  • 在每个数据集上分别使用同一个预训练检查点进行微调,训练 100 个 epoch,patience 设为 100,seed 设为 0,batch 设为 16,workers 设为 4。图像尺寸为 640 像素。seed 0 并非完全确定,因此 YOLO27m 和 YOLO27l 报告这类运行 3 次的平均值。
  • 启用类别重映射、channels-last 和预测 JSON 输出,并禁用绘图。
  • 评估每个数据集的最佳检查点,并复用其保存的 max_det,该值对应其最大目标数量。
  • 计算特定尺寸的 mAP50-95 时,在应用 COCO 的 Small、Medium 和 Large 分箱前,将真实标注框和预测框的面积乘以 (640 / max(image_width, image_height)) ** 2。
  • 为每个数据集赋予相同权重。每项尺寸指标仅纳入该分箱中至少有 10 个目标的数据集。

宏平均 mAP 为 sum(dataset validation mAP50-95) / 37。指标根据每个数据集保存的预测结果计算。

基准测试结果#

指标为 37 个验证划分的宏平均值,以百分比表示。

大小模型mAP50-95精确率召回率mAP50-95-SmAP50-95-MmAP50-95-L
L/XYOLO27l55.5078.8374.9038.1755.7563.36
L/XYOLO26x49.8576.7468.6134.4450.5451.69
L/XYOLO26l49.7275.0569.3134.4950.1651.72
L/XYOLO11l48.5374.2268.3331.9150.7150.77
L/XYOLOv5l48.0374.1167.7831.7349.7949.87
L/XYOLOv8l48.0273.9568.8032.0549.0449.56
L/XYOLOv8x47.6775.6666.4631.1249.6049.69
L/XYOLOv5x47.3574.6967.9631.2749.3949.76
L/XYOLO11x47.2473.6967.0831.2248.5749.24
MYOLO27m53.3875.8572.9535.9653.4061.40
MYOLO26m49.4276.2368.3132.9150.0251.32
MYOLOv5m48.1974.2168.0731.6849.6751.93
MYOLO11m48.1573.7268.5632.1449.7650.75
MYOLOv8m47.9973.8668.1530.7349.6151.97
SYOLO27s51.2376.9670.7434.2051.4754.74
SYOLO11s47.7874.7267.6629.5349.6950.69
SYOLO26s47.4774.3566.7331.5647.7250.58
SYOLOv8s47.3573.9767.5430.9048.4750.15
SYOLOv5s47.3073.9767.0230.4749.0750.10
NYOLO27n49.2574.8668.4931.9349.3053.20
NYOLO11n46.1972.8365.6928.3547.5150.66
NYOLOv8n45.8972.2965.5628.5647.5549.22
NYOLOv5n45.0971.6964.9928.6146.7948.14
NYOLO26n44.0870.0963.2028.6944.5247.96

基准测试#

使用 Ultralytics 的 main 分支,并设置 ULTRALYTICS_API_KEY 以访问数据集:

from ultralytics import YOLO

datasets = [
    "ul://ultralytics/datasets/airbus-oil-storage-detection",
    "ul://ultralytics/datasets/annopage-doc-elements",
    "ul://ultralytics/datasets/basketball-hoop-detection",
    "ul://ultralytics/datasets/ceymo",
    "ul://ultralytics/datasets/cheng-brain-tumor-mri",
    "ul://ultralytics/datasets/ddr-lesion",
    "ul://ultralytics/datasets/deeppcb",
    "ul://ultralytics/datasets/dentex",
    "ul://ultralytics/datasets/dspcbsd-pcb-surface-defect",
    "ul://ultralytics/datasets/egohands-egocentric",
    "ul://ultralytics/datasets/ena24",
    "ul://ultralytics/datasets/fisheye8k-traffic",
    "ul://ultralytics/datasets/floorplancad-2",
    "ul://ultralytics/datasets/grazpedwri-dx",
    "ul://ultralytics/datasets/groundcua-ui-yolo",
    "ul://ultralytics/datasets/global-wheat-head-detection-2021",
    "ul://ultralytics/datasets/hit-uav",
    "ul://ultralytics/datasets/iedxray",
    "ul://ultralytics/datasets/kvasir-seg-polyp",
    "ul://ultralytics/datasets/llvip",
    "ul://ultralytics/datasets/moda-multispectral-obb",
    "ul://ultralytics/datasets/plantdoc",
    "ul://ultralytics/datasets/racketvision-tennis-ball-yolo",
    "ul://ultralytics/datasets/rdd2022",
    "ul://ultralytics/datasets/rpc-retail-checkout",
    "ul://ultralytics/datasets/ruod-underwater",
    "ul://ultralytics/datasets/safe-human-17",
    "ul://ultralytics/datasets/seadronessee-2",
    "ul://ultralytics/datasets/sku110k-2",
    "ul://ultralytics/datasets/soccerdb",
    "ul://ultralytics/datasets/ssdd-sar-ship",
    "ul://ultralytics/datasets/taco-detect",
    "ul://ultralytics/datasets/tbx11k-tb-only",
    "ul://ultralytics/datasets/tn5000-thyroid-us",
    "ul://ultralytics/datasets/txl-pbc-blood-cells",
    "ul://ultralytics/datasets/uec-school-lunch-food-2",
    "ul://ultralytics/datasets/visdrone",
]

results = YOLO("yolo27n.pt").train(
    data=datasets,
    epochs=100,
    patience=100,
    imgsz=640,
    batch=16,
    fraction=[1000, 1.0, 0.0],
    seed=0,
    workers=4,
    cls_remap=True,
    channels_last=True,
    save_json=True,
    plots=False,
)
# 主分支报告按原始面积划分的尺寸分箱。此基准测试会单独缩放 GT 和预测面积
# 在计算特定尺寸的 AP 之前,按 (640 / max(image_width, image_height)) ** 2 缩放。

引用#

如果你在工作中使用 Ultralytics Benchmark,请引用Ultralytics YOLO26 论文:

@misc{jocher2026ultralyticsyolo26unifiedrealtime,
  title = {Ultralytics YOLO26: Unified Real-Time End-to-End Vision Models},
  author = {Glenn Jocher and Jing Qiu and Mengyu Liu and Shuai Lyu and Fatih Cagatay Akyon and Muhammet Esat Kalfaoglu},
  year = {2026},
  eprint = {2606.03748},
  archivePrefix = {arXiv},
  primaryClass = {cs.CV},
  doi = {10.48550/arXiv.2606.03748},
  url = {https://arxiv.org/abs/2606.03748},
}
贡献者

评论