Salta para o conte√ļdo

Segmenta√ß√£o de inst√Ęncias

Exemplos de segmenta√ß√£o de inst√Ęncias

A segmenta√ß√£o de inst√Ęncias vai um passo al√©m da dete√ß√£o de objectos e envolve a identifica√ß√£o de objectos individuais numa imagem e a sua segmenta√ß√£o do resto da imagem.

O resultado de um modelo de segmenta√ß√£o de inst√Ęncias √© um conjunto de m√°scaras ou contornos que delineia cada objeto na imagem, juntamente com etiquetas de classe e pontua√ß√Ķes de confian√ßa para cada objeto. A segmenta√ß√£o de inst√Ęncias √© √ļtil quando precisas de saber n√£o s√≥ onde est√£o os objectos numa imagem, mas tamb√©m qual √© a sua forma exacta.



Observa: Executa a segmentação com o modelo Ultralytics YOLOv8 pré-treinado em Python.

Dica

YOLOv8 Os modelos de segmentos utilizam o -seg sufixo, ou seja yolov8n-seg.pt e são pré-treinados em COCO.

Modelos

YOLOv8 Os modelos Segment pré-treinados são mostrados aqui. Os modelos Detetar, Segmentar e Pose são pré-treinados no conjunto de dados COCO, enquanto os modelos Classificar são pré-treinados no conjunto de dados ImageNet.

Os modelos são transferidos automaticamente a partir daversão mais recente de Ultralytics na primeira utilização.

Modelo tamanho
(pixéis)
mAPbox
50-95
mAPmask
50-95
Velocidade
CPU ONNX
(ms)
Velocidade
A100 TensorRT
(ms)
params
(M)
FLOPs
(B)
YOLOv8n-seg 640 36.7 30.5 96.1 1.21 3.4 12.6
YOLOv8s-seg 640 44.6 36.8 155.7 1.47 11.8 42.6
YOLOv8m-seg 640 49.9 40.8 317.0 2.18 27.3 110.2
YOLOv8l-seg 640 52.3 42.6 572.4 2.79 46.0 220.5
YOLOv8x-seg 640 53.4 43.4 712.1 4.02 71.8 344.1
  • mAPval Os valores s√£o para um modelo √ļnico de escala √ļnica em COCO val2017 conjunto de dados.
    Reproduzir por yolo val segment data=coco.yaml device=0
  • Velocidade calcula a m√©dia das imagens COCO val utilizando uma Amazon EC2 P4d inst√Ęncia.
    Reproduzir por yolo val segment data=coco128-seg.yaml batch=1 device=0|cpu

Comboio

Treina YOLOv8n-seg no conjunto de dados COCO128-seg para 100 épocas com o tamanho de imagem 640. Para obter uma lista completa dos argumentos disponíveis, consulta a página Configuração.

Exemplo

from ultralytics import YOLO

# Load a model
model = YOLO('yolov8n-seg.yaml')  # build a new model from YAML
model = YOLO('yolov8n-seg.pt')  # load a pretrained model (recommended for training)
model = YOLO('yolov8n-seg.yaml').load('yolov8n.pt')  # build from YAML and transfer weights

# Train the model
results = model.train(data='coco128-seg.yaml', epochs=100, imgsz=640)
# Build a new model from YAML and start training from scratch
yolo segment train data=coco128-seg.yaml model=yolov8n-seg.yaml epochs=100 imgsz=640

# Start training from a pretrained *.pt model
yolo segment train data=coco128-seg.yaml model=yolov8n-seg.pt epochs=100 imgsz=640

# Build a new model from YAML, transfer pretrained weights to it and start training
yolo segment train data=coco128-seg.yaml model=yolov8n-seg.yaml pretrained=yolov8n-seg.pt epochs=100 imgsz=640

Formato do conjunto de dados

YOLO O formato do conjunto de dados de segmentação pode ser consultado em pormenor no Guia do conjunto de dados. Para converter o teu conjunto de dados existente de outros formatos (como COCO, etc.) para o formato YOLO , utiliza a ferramenta JSON2YOLO em Ultralytics.

Val

Valida a precisão do modelo YOLOv8n-seg treinado no conjunto de dados COCO128-seg. Não precisas de passar nenhum argumento, pois o model mantém a sua formação data e argumentos como atributos do modelo.

Exemplo

from ultralytics import YOLO

# Load a model
model = YOLO('yolov8n-seg.pt')  # load an official model
model = YOLO('path/to/best.pt')  # load a custom model

# Validate the model
metrics = model.val()  # no arguments needed, dataset and settings remembered
metrics.box.map    # map50-95(B)
metrics.box.map50  # map50(B)
metrics.box.map75  # map75(B)
metrics.box.maps   # a list contains map50-95(B) of each category
metrics.seg.map    # map50-95(M)
metrics.seg.map50  # map50(M)
metrics.seg.map75  # map75(M)
metrics.seg.maps   # a list contains map50-95(M) of each category
yolo segment val model=yolov8n-seg.pt  # val official model
yolo segment val model=path/to/best.pt  # val custom model

Prevê

Utiliza um modelo YOLOv8n-seg treinado para executar previs√Ķes em imagens.

Exemplo

from ultralytics import YOLO

# Load a model
model = YOLO('yolov8n-seg.pt')  # load an official model
model = YOLO('path/to/best.pt')  # load a custom model

# Predict with the model
results = model('https://ultralytics.com/images/bus.jpg')  # predict on an image
yolo segment predict model=yolov8n-seg.pt source='https://ultralytics.com/images/bus.jpg'  # predict with official model
yolo segment predict model=path/to/best.pt source='https://ultralytics.com/images/bus.jpg'  # predict with custom model

Ver completo predict detalhes do modo no Prevê página.

Exportação

Exporta um modelo YOLOv8n-seg para um formato diferente como ONNX, CoreML, etc.

Exemplo

from ultralytics import YOLO

# Load a model
model = YOLO('yolov8n-seg.pt')  # load an official model
model = YOLO('path/to/best.pt')  # load a custom trained model

# Export the model
model.export(format='onnx')
yolo export model=yolov8n-seg.pt format=onnx  # export official model
yolo export model=path/to/best.pt format=onnx  # export custom trained model

Os formatos de exportação disponíveis em YOLOv8-seg encontram-se na tabela abaixo. Podes prever ou validar diretamente nos modelos exportados, ou seja yolo predict model=yolov8n-seg.onnx. São apresentados exemplos de utilização para o teu modelo após a conclusão da exportação.

Formato format Argumenta Modelo Metadados Argumentos
PyTorch - yolov8n-seg.pt ‚úÖ -
TorchScript torchscript yolov8n-seg.torchscript ‚úÖ imgsz, optimize
ONNX onnx yolov8n-seg.onnx ‚úÖ imgsz, half, dynamic, simplify, opset
OpenVINO openvino yolov8n-seg_openvino_model/ ‚úÖ imgsz, half, int8
TensorRT engine yolov8n-seg.engine ‚úÖ imgsz, half, dynamic, simplify, workspace
CoreML coreml yolov8n-seg.mlpackage ‚úÖ imgsz, half, int8, nms
TF SavedModel saved_model yolov8n-seg_saved_model/ ‚úÖ imgsz, keras
TF GraphDef pb yolov8n-seg.pb ‚ĚĆ imgsz
TF Leve tflite yolov8n-seg.tflite ‚úÖ imgsz, half, int8
TF Borda TPU edgetpu yolov8n-seg_edgetpu.tflite ‚úÖ imgsz
TF.js tfjs yolov8n-seg_web_model/ ‚úÖ imgsz, half, int8
PaddlePaddle paddle yolov8n-seg_paddle_model/ ‚úÖ imgsz
ncnn ncnn yolov8n-seg_ncnn_model/ ‚úÖ imgsz, half

Ver completo export detalhes no Exportação página.



Criado em 2023-11-12, Atualizado em 2024-02-03
Autores: glenn-jocher (9), Laughing-q (1), AyushExel (1)

Coment√°rios