Оценка позы

Оценка позы — это задача, которая включает в себя определение местоположения определенных точек на изображении, обычно называемых ключевыми точками. Ключевые точки могут представлять различные части объекта, такие как суставы, ориентиры или другие отличительные особенности. Местоположение ключевых точек обычно представляется в виде набора 2D [x, y] или 3D [x, y, visible] координат.

Результатом работы модели оценки позы является набор точек, представляющих ключевые точки объекта на изображении, обычно вместе с оценками достоверности для каждой точки. Оценка позы — хороший выбор, когда вам нужно идентифицировать определенные части объекта в сцене и их расположение относительно друг друга.

Смотреть: Ultralytics YOLO11 Pose Estimation Tutorial | Отслеживание объектов и определение позы человека в реальном времени

Модели

Здесь представлены предварительно обученные модели определения позы Ultralytics YOLO11. Модели Detect, Segment и Pose предварительно обучены на наборе данных COCO, а модели Classify — на наборе данных ImageNet.

Модели загружаются автоматически из последнего релиза Ultralytics при первом использовании.

• mAP^val значения для одномодельной одномасштабной модели на val2017 ключевых точек COCO наборе данных.
  Воспроизвести с помощью yolo val pose data=coco-pose.yaml device=0
• Скорость в среднем по изображениям COCO val с использованием Amazon EC2 P4d instance.
  Воспроизвести с помощью yolo val pose data=coco-pose.yaml batch=1 device=0|cpu

Обучение

Обучите модель YOLO11-pose на наборе данных COCO8-pose. Набор данных COCO8-pose — это небольшой образец набора данных, который идеально подходит для тестирования и отладки ваших моделей оценки позы.

from ultralytics import YOLO

# Load a model
model = YOLO("yolo11n-pose.yaml")  # build a new model from YAML
model = YOLO("yolo11n-pose.pt")  # load a pretrained model (recommended for training)
model = YOLO("yolo11n-pose.yaml").load("yolo11n-pose.pt")  # build from YAML and transfer weights

# Train the model
results = model.train(data="coco8-pose.yaml", epochs=100, imgsz=640)

# Build a new model from YAML and start training from scratch
yolo pose train data=coco8-pose.yaml model=yolo11n-pose.yaml epochs=100 imgsz=640

# Start training from a pretrained *.pt model
yolo pose train data=coco8-pose.yaml model=yolo11n-pose.pt epochs=100 imgsz=640

# Build a new model from YAML, transfer pretrained weights to it and start training
yolo pose train data=coco8-pose.yaml model=yolo11n-pose.yaml pretrained=yolo11n-pose.pt epochs=100 imgsz=640

Формат набора данных

Подробное описание формата набора данных для определения позы YOLO можно найти в Руководстве по наборам данных. Чтобы преобразовать существующий набор данных из других форматов (например, COCO и т. д.) в формат YOLO, используйте инструмент JSON2YOLO от Ultralytics.

Для пользовательских задач оценки позы вы также можете изучить специализированные наборы данных, такие как Tiger-Pose для оценки позы животных, Hand Keypoints для отслеживания рук или Dog-Pose для анализа позы собак.

Валидация

Проверьте обученную модель YOLO11n-pose точность на наборе данных COCO8-pose. Аргументы не требуются, так как model сохраняет свое обучение data и аргументы в качестве атрибутов модели.

from ultralytics import YOLO

# Load a model
model = YOLO("yolo11n-pose.pt")  # load an official model
model = YOLO("path/to/best.pt")  # load a custom model

# Validate the model
metrics = model.val()  # no arguments needed, dataset and settings remembered
metrics.box.map  # map50-95
metrics.box.map50  # map50
metrics.box.map75  # map75
metrics.box.maps  # a list contains map50-95 of each category
metrics.pose.map  # map50-95(P)
metrics.pose.map50  # map50(P)
metrics.pose.map75  # map75(P)
metrics.pse.maps  # a list contains map50-95(P) of each category

yolo pose val model=yolo11n-pose.pt # val official model
yolo pose val model=path/to/best.pt # val custom model

Прогнозирование

Используйте обученную модель YOLO11n-pose для выполнения прогнозов на изображениях. Режим predict позволяет выполнять инференс на изображениях, видео или потоках в реальном времени.

from ultralytics import YOLO

# Load a model
model = YOLO("yolo11n-pose.pt")  # load an official model
model = YOLO("path/to/best.pt")  # load a custom model

# Predict with the model
results = model("https://ultralytics.com/images/bus.jpg")  # predict on an image

# Access the results
for result in results:
    xy = result.keypoints.xy  # x and y coordinates
    xyn = result.keypoints.xyn  # normalized
    kpts = result.keypoints.data  # x, y, visibility (if available)

yolo pose predict model=yolo11n-pose.pt source='https://ultralytics.com/images/bus.jpg' # predict with official model
yolo pose predict model=path/to/best.pt source='https://ultralytics.com/images/bus.jpg' # predict with custom model

Смотрите полную информацию о predict деталях режима в Прогнозирование странице.

Экспорт

Экспортируйте модель позы YOLO11n в другой формат, например ONNX, CoreML и т. д. Это позволит вам развернуть свою модель на различных платформах и устройствах для вывода в реальном времени.

from ultralytics import YOLO

# Load a model
model = YOLO("yolo11n-pose.pt")  # load an official model
model = YOLO("path/to/best.pt")  # load a custom trained model

# Export the model
model.export(format="onnx")

yolo export model=yolo11n-pose.pt format=onnx # export official model
yolo export model=path/to/best.pt format=onnx # export custom trained model

Доступные форматы экспорта YOLO11-pose указаны в таблице ниже. Вы можете выполнить экспорт в любой формат, используя format аргумент, например: format='onnx' или format='engine'. Вы можете прогнозировать или проверять непосредственно на экспортированных моделях, например: yolo predict model=yolo11n-pose.onnx. Примеры использования отображаются для вашей модели после завершения экспорта.

Смотрите полную информацию о export подробности в Экспорт странице.

Часто задаваемые вопросы

Что такое оценка позы с помощью Ultralytics YOLO11 и как это работает?

Оценка позы с помощью Ultralytics YOLO11 включает в себя определение конкретных точек, известных как ключевые точки, на изображении. Эти ключевые точки обычно представляют собой суставы или другие важные особенности объекта. Выходные данные включают в себя [x, y] координаты и оценки достоверности для каждой точки. Модели YOLO11-pose специально разработаны для этой задачи и используют -pose суффикс, например yolo11n-pose.pt. Эти модели предварительно обучены на наборах данных, таких как ключевых точках COCO , и могут использоваться для различных задач оценки позы. Для получения дополнительной информации посетите Страницу оценки позы.

Как я могу обучить модель YOLO11-pose на пользовательском наборе данных?

Обучение модели YOLO11-pose на пользовательском наборе данных включает загрузку модели, либо новой модели, определенной YAML-файлом, либо предварительно обученной модели. Затем вы можете начать процесс обучения, используя указанный набор данных и параметры.

from ultralytics import YOLO

# Load a model
model = YOLO("yolo11n-pose.yaml")  # build a new model from YAML
model = YOLO("yolo11n-pose.pt")  # load a pretrained model (recommended for training)

# Train the model
results = model.train(data="your-dataset.yaml", epochs=100, imgsz=640)

Для получения подробной информации об обучении обратитесь к Разделу обучения. Вы также можете использовать Ultralytics HUB для обучения пользовательских моделей оценки позы без использования кода.

Как проверить обученную модель YOLO11-pose?

Валидация модели YOLO11-pose включает оценку ее точности с использованием тех же параметров набора данных, которые были сохранены во время обучения. Вот пример:

from ultralytics import YOLO

# Load a model
model = YOLO("yolo11n-pose.pt")  # load an official model
model = YOLO("path/to/best.pt")  # load a custom model

# Validate the model
metrics = model.val()  # no arguments needed, dataset and settings remembered

Для получения дополнительной информации посетите Раздел Val.

Могу ли я экспортировать модель YOLO11-pose в другие форматы и как это сделать?

Да, вы можете экспортировать модель YOLO11-pose в различные форматы, такие как ONNX, CoreML, TensorRT и другие. Это можно сделать с помощью python или интерфейса командной строки (CLI).

from ultralytics import YOLO

# Load a model
model = YOLO("yolo11n-pose.pt")  # load an official model
model = YOLO("path/to/best.pt")  # load a custom trained model

# Export the model
model.export(format="onnx")

Подробнее см. в разделе экспорта. Экспортированные модели могут быть развернуты на периферийных устройствах для приложений реального времени, таких как фитнес-трекинг, анализ спортивных соревнований или робототехника.

Какие модели Ultralytics YOLO11-pose доступны и каковы их показатели производительности?

Ultralytics YOLO11 предлагает различные предварительно обученные модели определения позы, такие как YOLO11n-pose, YOLO11s-pose, YOLO11m-pose и другие. Эти модели различаются по размеру, точности (mAP) и скорости. Например, модель YOLO11n-pose достигает mAP^pose50-95, равного 50.0, и mAP^pose50, равного 81.0. Полный список и подробную информацию о производительности можно найти в разделе «Модели».

📅 Создано 1 год назад ✏️ Обновлено 4 месяца назад

Комментарии