Ultralytics YOLO27:

NYU Depth V2 깊이 데이터셋#

NYU Depth V2단안 깊이 추정을 위한 표준 실내 벤치마크입니다. Microsoft Kinect v1으로 다양한 실내 장면을 기록한 RGB-D 비디오 시퀀스로 구성됩니다. YOLO26-Depth 정확도를 보고할 때 사용되는 주요 벤치마크입니다.

Ultralytics Platform에서 NYU Depth V2 살펴보기를 통해 RGB-깊이 쌍을 미리 보고, 데이터셋 통계를 확인하고, 학습을 위해 복제할 수 있습니다.

주요 기능#

  • Microsoft Kinect v1 RGB-D 센서로 캡처되었습니다.
  • 다양한 실제 실내 장면(가정, 사무실, 교실 및 이와 유사한 공간)을 다룹니다.
  • 일반적인 소비자용 실내 RGB-D 캡처에 해당하는 약 10m까지의 깊이 범위를 지원합니다.
  • 평가는 654개 이미지로 구성된 표준 Eigen 테스트 분할에서 수행됩니다.
  • 단안 깊이 추정 정확도를 보고하기 위한 주요 벤치마크입니다.

YOLO26-Depth에서의 역할#

NYU Depth V2는 YOLO26-Depth 제품군을 위한 주요 제로샷 평가 벤치마크이며, 깊이 작업 페이지의 주요 지표도 이 데이터셋에서 보고됩니다. 공개된 YOLO26-Depth 모델은 NYU에서 학습되지 않습니다. 데이터셋에 학습 분할이 포함되어 있지만 이를 사용하지 않으며, 분리된 테스트 결과만 보고합니다.

평가에는 멀티 스케일 및 수평 플립 테스트 시점 증강(TTA)이 사용되며, 지표를 계산하기 전에 예측 깊이 맵과 ground truth 깊이 맵 간에 로그 최소제곱 스케일 정렬을 수행합니다.

Results#

아래 표는 모델 크기별 NYU Depth V2 Eigen 테스트 분할에서의 delta1 정확도(1.25× 임계값 이내에 있는 픽셀의 비율이며, 높을수록 좋음)를 보여줍니다.

모델delta1
YOLO26n-depth0.882
YOLO26s-depth0.855
YOLO26m-depth0.919
YOLO26l-depth0.927
YOLO26x-depth0.923

데이터셋 YAML#

YAML 파일은 데이터셋 구성을 정의하는 데 사용됩니다. 데이터셋의 경로, 클래스 및 기타 관련 정보가 포함되어 있습니다.

ultralytics/cfg/datasets/nyu-depth.yaml
# Ultralytics 🚀 AGPL-3.0 License - https://ultralytics.com/license

# NYU Depth V2 dataset for monocular depth estimation
# Documentation: https://cs.nyu.edu/~fergus/datasets/nyu_depth_v2.html
# 795 train + 654 val (Eigen test split) images, 480x640, indoor scenes, depth in meters
# Example usage: yolo depth train data=nyu-depth.yaml model=yolo26n-depth.pt
# parent
# ├── ultralytics
# └── datasets
#     └── nyu-depth-png  ← downloads here (≈1.5 GB)

# Train/val/test sets as 1) dir: path/to/imgs, 2) file: path/to/imgs.txt, or 3) list: [path/to/imgs1, path/to/imgs2, ..]
path: nyu-depth-png # dataset root dir (relative to Ultralytics settings 'datasets_dir')
train: images/train # train images (relative to 'path') 795 images
val: images/val # val images (relative to 'path') 654 images

# Depth maps are paired uint16 millimeter PNGs under depth/<split>/, resolved by
# swapping '/images/' -> '/depth/' on each image path.

# Classes
nc: 1
names:
  0: depth

channels: 3
depth_scale: 1000

# Download script/URL (optional)
download: https://github.com/ultralytics/assets/releases/download/v0.0.0/nyu-depth-png.zip

사용법#

NYU Depth V2 벤치마크에서 YOLO26-Depth 모델을 평가하려면 다음 코드 스니펫을 사용할 수 있습니다. 사용 가능한 인자의 전체 목록은 모델 검증 페이지를 참조하세요.

검증 예제
from ultralytics import YOLO

# Load a model
model = YOLO("yolo26x-depth.pt")  # load a pretrained depth model

# Evaluate on the NYU Depth V2 benchmark
results = model.val(data="nyu-depth.yaml")

사전 학습 모델#

YOLO26 깊이 제품군은 NYU Depth V2 벤치마크에서 제로샷으로 평가됩니다. 이러한 모델은 최신 Ultralytics 릴리스에서 자동으로 다운로드됩니다. 예를 들어 v8.4.0의 YOLO26x-depth가 있으며, 다양한 정확도 및 리소스 요구 사항에 맞춰 여러 크기(yolo26n/s/m/l/x-depth)로 제공됩니다.

인용 및 감사의 글#

연구 또는 개발 작업에서 NYU Depth V2 데이터셋을 사용하는 경우 다음 논문을 인용해 주세요.

인용문
@inproceedings{silberman2012indoor,
      title={Indoor Segmentation and Support Inference from RGBD Images},
      author={Silberman, Nathan and Hoiem, Derek and Kohli, Pushmeet and Fergus, Rob},
      booktitle={Proceedings of the European Conference on Computer Vision (ECCV)},
      year={2012}
}

컴퓨터 비전 커뮤니티를 위해 이 귀중한 리소스를 제작하고 유지 관리해 주신 저자분들께 감사드립니다.

FAQ#

  • NYU Depth V2는 최대 약 10 m 범위의 주거 공간, 사무실, 교실을 Kinect v1 RGB-D로 촬영한 데이터와 널리 사용되는 654장의 이미지로 구성된 Eigen 테스트 분할을 갖춘 표준 실내 단안 깊이 벤치마크입니다. Depth Estimation task page의 주요 YOLO26-Depth 지표가 NYU Depth V2를 기준으로 보고됩니다.

  • 아니요. 배포된 모델들은 제로샷으로 평가되므로, NYU 학습 분할은 사용되지 않고 보류된 테스트 결과만 보고됩니다. 공개된 수치는 멀티 스케일 및 플립 테스트 시간 증강을 거친 후 로그 최소 자승 스케일 정렬을 사용합니다.

  • yolo depth val data=nyu-depth.yaml model=yolo26x-depth.pt을 실행하거나 Usage 섹션의 Python 예제를 사용하십시오. 내장된 검증기는 중앙값 정렬을 포함하는 단일 스케일 추론을 사용하므로, Results의 TTA 수치보다 점수가 낮습니다. 재현 가능한 값은 task page를 참조하십시오.

  • NYU Depth V2 on Ultralytics Platform을 탐색하여 RGB-깊이 쌍을 미리 보고, 데이터셋 통계를 확인하고, 클라우드 학습용 데이터셋을 복제하십시오.

댓글