Bắt đầu

Bộ dữ liệu COCO8-Seg

Giới thiệu#

Ultralytics COCO8-Seg là một dataset phân đoạn đối tượng nhỏ, gồm 8 ảnh đầu tiên của tập COCO train 2017, trong đó có 4 ảnh huấn luyện và 4 ảnh xác thực. Dataset này phù hợp để kiểm thử và gỡ lỗi model phân đoạn hoặc thử nghiệm các phương pháp phân đoạn mới. Với 8 ảnh, dataset đủ nhỏ để dễ quản lý nhưng vẫn đủ đa dạng để kiểm tra lỗi trong pipeline huấn luyện và làm bước kiểm tra nhanh trước khi huấn luyện trên các dataset lớn hơn.

Cấu trúc dataset#

  • Ảnh: Tổng cộng 8 ảnh (4 train / 4 val).
  • Lớp: 80 danh mục COCO.
  • Nhãn: Các đa giác ở định dạng YOLO được lưu trong labels/{train,val}, tương ứng với từng tệp ảnh.
  • Dung lượng tải xuống: ~1 MB.

Khám phá COCO8-Seg trên Ultralytics Platform để duyệt từng ảnh cùng mask đa giác, xem phân bố lớp và heatmap nhãn trong tab Charts, cũng như sao chép bộ dữ liệu để huấn luyện model của riêng bạn trên cloud.

YAML của dataset#

Tệp YAML được dùng để xác định cấu hình bộ dữ liệu. Tệp này chứa thông tin về đường dẫn, lớp và các thông tin liên quan khác của bộ dữ liệu. Với bộ dữ liệu COCO8-Seg, tệp coco8-seg.yaml được duy trì tại https://github.com/ultralytics/ultralytics/blob/main/ultralytics/cfg/datasets/coco8-seg.yaml.

ultralytics/cfg/datasets/coco8-seg.yaml
# Ultralytics 🚀 AGPL-3.0 License - https://ultralytics.com/license

# COCO8-seg dataset (first 8 images from COCO train2017) by Ultralytics
# Documentation: https://docs.ultralytics.com/datasets/segment/coco8-seg
# Example usage: yolo train data=coco8-seg.yaml
# parent
# ├── ultralytics
# └── datasets
#     └── coco8-seg ← downloads here (1 MB)

# Train/val/test sets as 1) dir: path/to/imgs, 2) file: path/to/imgs.txt, or 3) list: [path/to/imgs1, path/to/imgs2, ..]
path: coco8-seg # dataset root dir
train: images/train # train images (relative to 'path') 4 images
val: images/val # val images (relative to 'path') 4 images
test: # test images (optional)

# Classes
names:
  0: person
  1: bicycle
  2: car
  3: motorcycle
  4: airplane
  5: bus
  6: train
  7: truck
  8: boat
  9: traffic light
  10: fire hydrant
  11: stop sign
  12: parking meter
  13: bench
  14: bird
  15: cat
  16: dog
  17: horse
  18: sheep
  19: cow
  20: elephant
  21: bear
  22: zebra
  23: giraffe
  24: backpack
  25: umbrella
  26: handbag
  27: tie
  28: suitcase
  29: frisbee
  30: skis
  31: snowboard
  32: sports ball
  33: kite
  34: baseball bat
  35: baseball glove
  36: skateboard
  37: surfboard
  38: tennis racket
  39: bottle
  40: wine glass
  41: cup
  42: fork
  43: knife
  44: spoon
  45: bowl
  46: banana
  47: apple
  48: sandwich
  49: orange
  50: broccoli
  51: carrot
  52: hot dog
  53: pizza
  54: donut
  55: cake
  56: chair
  57: couch
  58: potted plant
  59: bed
  60: dining table
  61: toilet
  62: tv
  63: laptop
  64: mouse
  65: remote
  66: keyboard
  67: cell phone
  68: microwave
  69: oven
  70: toaster
  71: sink
  72: refrigerator
  73: book
  74: clock
  75: vase
  76: scissors
  77: teddy bear
  78: hair drier
  79: toothbrush

# Download script/URL (optional)
download: https://github.com/ultralytics/assets/releases/download/v0.0.0/coco8-seg.zip

Cách sử dụng#

Để huấn luyện model YOLO26n-seg trên dataset COCO8-Seg trong 100 epoch với kích thước ảnh 640, bạn có thể dùng các đoạn code sau.

Ví dụ huấn luyện
from ultralytics import YOLO

# Tải model
model = YOLO("yolo26n-seg.pt")  # tải model đã huấn luyện trước (được khuyến nghị khi huấn luyện)

# Huấn luyện model
results = model.train(data="coco8-seg.yaml", epochs=100, imgsz=640)

Hình ảnh mẫu và annotation#

Dưới đây là một số ảnh trong bộ dữ liệu COCO8-Seg cùng với các nhãn tương ứng:

COCO8-seg instance segmentation dataset mosaic
  • Ảnh ghép Mosaic: Hình ảnh này minh họa một batch huấn luyện được tạo từ các ảnh mosaic của bộ dữ liệu. Mosaic là kỹ thuật được sử dụng trong quá trình huấn luyện, kết hợp nhiều hình ảnh thành một hình ảnh duy nhất để tăng sự đa dạng của đối tượng và bối cảnh trong mỗi batch huấn luyện. Kỹ thuật này giúp cải thiện khả năng tổng quát hóa của model đối với các kích thước đối tượng, tỷ lệ khung hình và ngữ cảnh khác nhau.

Trích dẫn và lời cảm ơn#

Nếu sử dụng bộ dữ liệu COCO trong nghiên cứu hoặc phát triển, vui lòng trích dẫn bài báo sau:

Trích dẫn
@misc{lin2015microsoft,
      title={Microsoft COCO: Common Objects in Context},
      author={Tsung-Yi Lin and Michael Maire and Serge Belongie and Lubomir Bourdev and Ross Girshick and James Hays and Pietro Perona and Deva Ramanan and C. Lawrence Zitnick and Piotr Dollár},
      year={2015},
      eprint={1405.0312},
      archivePrefix={arXiv},
      primaryClass={cs.CV}
}

Chúng tôi xin cảm ơn COCO Consortium đã tạo và duy trì tài nguyên giá trị này cho cộng đồng thị giác máy tính. Để biết thêm thông tin về bộ dữ liệu COCO và những người tạo ra bộ dữ liệu, hãy truy cập trang web bộ dữ liệu COCO.

Câu hỏi thường gặp#

  • Dataset COCO8-Seg là dataset phân đoạn đối tượng gọn nhẹ của Ultralytics, gồm 8 ảnh đầu tiên từ tập COCO train 2017 (4 ảnh huấn luyện, 4 ảnh xác thực). Dataset này được thiết kế để kiểm thử và gỡ lỗi model phân đoạn hoặc thử nghiệm các phương pháp phân đoạn mới. Dataset đặc biệt hữu ích khi dùng với Ultralytics YOLO26 để lặp nhanh và kiểm tra lỗi pipeline trước khi mở rộng sang các dataset lớn hơn.

  • Để huấn luyện model YOLO26n-seg trên bộ dữ liệu COCO8-Seg trong 100 epoch với kích thước ảnh 640, bạn có thể dùng các lệnh Python hoặc CLI. Sau đây là ví dụ nhanh:

    Ví dụ huấn luyện
    from ultralytics import YOLO
    
    # Tải model
    model = YOLO("yolo26n-seg.pt")  # Tải model pretrained (khuyến nghị khi training)
    
    # Huấn luyện model
    results = model.train(data="coco8-seg.yaml", epochs=100, imgsz=640)

    Để được giải thích đầy đủ về các tham số và tùy chọn cấu hình hiện có, hãy xem tài liệu Huấn luyện.

  • Vì quá trình tải xuống và vòng lặp train/val nhỏ hơn nhiều so với COCO đầy đủ, COCO8-Seg cho phép bạn chạy một lượt huấn luyện và validation để phát hiện lỗi pipeline — chẳng hạn như data loader bị lỗi, loss cấu hình sai hoặc augmentation không phù hợp — trước khi chuyển sang bộ dữ liệu lớn hơn. Tìm hiểu thêm về các định dạng bộ dữ liệu được hỗ trợ trong hướng dẫn bộ dữ liệu phân đoạn của Ultralytics.

  • Tệp cấu hình YAML cho bộ dữ liệu COCO8-Seg có trong repository Ultralytics. Bạn có thể truy cập trực tiếp tệp tại https://github.com/ultralytics/ultralytics/blob/main/ultralytics/cfg/datasets/coco8-seg.yaml. Tệp YAML bao gồm thông tin thiết yếu về đường dẫn bộ dữ liệu, lớp và các thiết lập cấu hình cần thiết để huấn luyện và validation model.

  • Xét về quy mô, COCO8-Seg (8 ảnh) nhỏ hơn COCO128-Seg (128 ảnh) và bộ dữ liệu COCO-Seg đầy đủ (118.287 ảnh huấn luyện):

    • COCO8-Seg: 8 ảnh (4 train, 4 val) — lựa chọn kiểm tra nhanh nhanh nhất, phù hợp cho CI và gỡ lỗi tức thời.
    • COCO128-Seg: 128 ảnh — cân bằng giữa quy mô và độ đa dạng, trong đó train và val dùng chung một thư mục.
    • COCO-Seg đầy đủ: 118.287 ảnh huấn luyện — toàn diện nhưng tiêu tốn nhiều tài nguyên, cần khoảng ~20 GB cho lần tải xuống đầu tiên.

    Dùng COCO8-Seg để kiểm tra pipeline nhanh nhất có thể, sau đó chuyển sang COCO128-Seg hoặc bộ dữ liệu COCO-Seg đầy đủ khi mức độ tin cậy tăng lên.

Bình luận6

Đặt câu hỏi, chia sẻ kết quả hoặc giúp đỡ người khác.

  1. kh-diabGitHub

    Hello I am struggling because I followed the same coco format in the yaml file but still get this error

    Epoch GPU_mem box_loss seg_loss cls_loss dfl_loss Instances Size

    0%| | 0/2 [00:00<?, ?it/s] Traceback (most recent call last): File "/home/kdiab/.conda/envs/yolov8/lib/python3.10/site-packages/ultralytics/utils/loss.py", line 289, in call targets = torch.cat((batch_idx, batch["cls"].view(-1, 1), batch["bboxes"]), 1) RuntimeError: Sizes of tensors must match except in dimension 1. Expected size 66 but got size 0 for tensor number 1 in the list.

    The above exception was the direct cause of the following exception:

    Traceback (most recent call last): File "/home/kdiab/Documents/OST/workspace/dataset/coding/Train_Model/train segment model V6.0.py", line 33, in results =model.train( File "/home/kdiab/.conda/envs/yolov8/lib/python3.10/site-packages/ultralytics/engine/model.py", line 652, in train self.trainer.train() File "/home/kdiab/.conda/envs/yolov8/lib/python3.10/site-packages/ultralytics/engine/trainer.py", line 204, in train self._do_train(world_size) File "/home/kdiab/.conda/envs/yolov8/lib/python3.10/site-packages/ultralytics/engine/trainer.py", line 381, in _do_train self.loss, self.loss_items = self.model(batch) File "/home/kdiab/.conda/envs/yolov8/lib/python3.10/site-packages/torch/nn/modules/module.py", line 1532, in _wrapped_call_impl return self._call_impl(*args, **kwargs) File "/home/kdiab/.conda/envs/yolov8/lib/python3.10/site-packages/torch/nn/modules/module.py", line 1541, in _call_impl return forward_call(*args, **kwargs) File "/home/kdiab/.conda/envs/yolov8/lib/python3.10/site-packages/ultralytics/nn/tasks.py", line 101, in forward return self.loss(x, *args, **kwargs) File "/home/kdiab/.conda/envs/yolov8/lib/python3.10/site-packages/ultralytics/nn/tasks.py", line 283, in loss return self.criterion(preds, batch) File "/home/kdiab/.conda/envs/yolov8/lib/python3.10/site-packages/ultralytics/utils/loss.py", line 294, in call raise TypeError( TypeError: ERROR ❌ segment dataset incorrectly formatted or not a segment dataset. This error can occur when incorrectly training a 'segment' model on a 'detect' dataset, i.e. 'yolo train model=yolov8n-seg.pt data=coco8.yaml'. Verify your dataset is a correctly formatted 'segment' dataset using 'data=coco8-seg.yaml' as an example.

    and this is my yaml file

    Ultralytics YOLO , AGPL-3.0 license

    COCO8-seg dataset (first 8 images from COCO train2017) by Ultralytics

    Documentation: https://docs.ultralytics.com/datasets/segment/coco8-seg/

    Example usage: yolo train data=coco8-seg.yaml

    parent

    ├── ultralytics

    └── datasets

    └── coco8-seg ← downloads here (1 MB)

    Train/val/test sets as 1) dir: path/to/imgs, 2) file: path/to/imgs.txt, or 3) list: [path/to/imgs1, path/to/imgs2, ..]

    path: /home/kdiab/Documents/OST/workspace/dataset/model_train/Group-C-tiny-Segment # dataset root dir train: /home/kdiab/Documents/OST/workspace/dataset/model_train/Group-C-tiny-Segment/images/train # train images (relative to 'path') 4 images val: /home/kdiab/Documents/OST/workspace/dataset/model_train/Group-C-tiny-Segment/images/val # val images (relative to 'path') 4 images test: # test images (optional)

    Classes

    names: 0: weed 1: rumex

    and I am using model model = YOLO('yolov8x-seg.pt')

    my labeled files is as follows

    0 0.094970703125 0.46401098901098903 0.09033203125 0.160989010989011 0 0.07861328125 0.46153846153846156 0.0556640625 0.03296703296703297 0 0.116943359375 0.43763736263736264 0.02783203125 0.036813186813186814

    can you please advise what is the error

    1. Glenn JocherUltralytics

      @kh-diab it looks like the error you're encountering is due to a mismatch in the dataset format. Ensure that your dataset is correctly formatted for segmentation. Verify that your label files contain segmentation masks and not just bounding boxes. Also, make sure you are using the latest version of the Ultralytics package. If the issue persists, please check the dataset structure against the COCO8-Seg example provided in the documentation: https://docs.ultralytics.com/datasets/segment/coco8-seg/. This should help resolve the formatting issue.

  2. Mauricio566GitHub

    I really love their material. I have a question please help me. If the annotations of an image for a detection problem look like this... 1 0.5302913188934326 0.5031314492225647 0.2403690367937088 0.34829962253570557 So what does the annotation of a segmented image look like? because in the dataset I did not understand the annotation and you could help me understand this process. thank you

    1. Glenn JocherUltralytics

      @Mauricio566 hello! Thanks for your kind words and for reaching out with your question. 🌟

      For instance segmentation, unlike detection annotations which typically include class labels and bounding box coordinates (x_center, y_center, width, height), segmentation annotations are more complex. They include polygonal annotations or masks that precisely outline the object within an image.

      In datasets like COCO, each segmented object in an image will have a corresponding mask defined by a set of polygon points. These points outline the exact shape of the object rather than just a bounding rectangle. This allows for a more accurate and detailed representation, especially useful for applications requiring precise object localization and shape delineation.

      If you're working with the COCO8-Seg dataset, the annotations will include these detailed masks for each object in the images. You can view these annotations in the JSON format provided with the dataset, where each object's mask is represented as a series of coordinates outlining the object.

      I hope this helps clarify the difference! If you have any more questions or need further assistance, feel free to ask. Happy coding! 😊

      1
    2. jotar25GitHub

      this is actually not clear, should i separate masked color to multiple images? what is it the processs to generate labels from multi mask image?

    3. Glenn JocherUltralytics

      Hi @jotar25,

      Thank you for your question! 😊 Let's clarify the process for generating labels from multi-mask images for instance segmentation.

      In instance segmentation, each object in an image is annotated with a mask that precisely outlines its shape. These masks are typically represented as polygons or binary masks. Here's a step-by-step overview of the process:

      1. Separate Masks for Each Object: Each object in the image should have its own mask. If you have a multi-mask image where different objects are represented by different colors, you will need to separate these into individual masks.

      2. Polygon Annotations: For datasets like COCO, the masks are often stored as polygons. Each polygon is a list of coordinates that outline the object. These coordinates are stored in the dataset's annotation file (e.g., a JSON file for COCO).

      3. Binary Masks: Alternatively, masks can be stored as binary images where the pixels belonging to an object are set to 1, and all other pixels are set to 0. Each object will have a separate binary mask.

      4. Annotation Format: In the COCO format, each annotation includes:

        • segmentation: A list of polygons for the object.
        • bbox: The bounding box of the object.
        • category_id: The class of the object.
        • image_id: The ID of the image.

      Here's an example of how a COCO annotation might look:

      {
        "segmentation": [[x1, y1, x2, y2, ..., xn, yn]],
        "bbox": [x, y, width, height],
        "category_id": 1,
        "image_id": 123
      }
      Example Code for Generating Binary Masks

      If you have a multi-mask image and need to generate individual binary masks, you can use the following Python code snippet:

      import cv2
      import numpy as np
      
      # Load the multi-mask image
      multi_mask_image = cv2.imread('multi_mask_image.png')
      
      # Assume each object is represented by a unique color
      unique_colors = np.unique(multi_mask_image.reshape(-1, multi_mask_image.shape[2]), axis=0)
      
      # Create binary masks for each unique color
      binary_masks = []
      for color in unique_colors:
          mask = cv2.inRange(multi_mask_image, color, color)
          binary_masks.append(mask)
      
      # Save or process the binary masks
      for i, mask in enumerate(binary_masks):
          cv2.imwrite(f'binary_mask_{i}.png', mask)

      For more detailed information on the COCO8-Seg dataset and how to work with it, please refer to the COCO8-Seg Dataset Documentation.

      I hope this helps! If you have any more questions or need further assistance, feel free to ask. Happy coding! 🚀