Ir al contenido

Exportación y Despliegue de Axelera AI

Versión Experimental

Esta es una integración experimental que demuestra el despliegue en el hardware Axelera Metis. Se anticipa una integración completa para febrero de 2026 con exportación de modelos sin requerir hardware Axelera e instalación estándar con pip.

Ultralytics se asocia con Axelera AI para habilitar inferencia de alto rendimiento y eficiencia energética en dispositivos Edge AI. Exporte y despliegue modelos Ultralytics YOLO directamente a la Metis® AIPU utilizando el Voyager SDK.

Ecosistema de implementación de IA periférica de Axelera para YOLO

Axelera AI proporciona aceleración de hardware dedicada para visión artificial en el edge, utilizando una arquitectura de flujo de datos propietaria y computación en memoria para ofrecer hasta 856 TOPS con bajo consumo de energía.

Seleccionar el hardware adecuado

Axelera AI ofrece varios factores de forma para adaptarse a diferentes restricciones de implementación. El siguiente gráfico ayuda a identificar el hardware óptimo para su implementación de Ultralytics YOLO.

graph TD
    A[Start: Select Deployment Target] --> B{Device Type?}
    B -->|Edge Server / Workstation| C{Throughput Needs?}
    B -->|Embedded / Robotics| D{Space Constraints?}
    B -->|Standalone / R&D| E[Dev Kits & Systems]

    C -->|Max Density <br> 30+ Streams| F[**Metis PCIe x4**<br>856 TOPS]
    C -->|Standard PC <br> Low Profile| G[**Metis PCIe x1**<br>214 TOPS]

    D -->|Drones & Handhelds| H[**Metis M.2**<br>2280 M-Key]
    D -->|High Performance Embedded| I[**Metis M.2 MAX**<br>Extended Thermal]

    E -->|ARM-based All-in-One| J[**Metis Compute Board**<br>RK3588 + AIPU]
    E -->|Prototyping| K[**Arduino Portenta x8**<br>Integration Kit]

    click F "https://store.axelera.ai/"
    click G "https://store.axelera.ai/"
    click H "https://store.axelera.ai/"
    click J "https://store.axelera.ai/"

Portfolio de hardware

La línea de hardware de Axelera está optimizada para ejecutar Ultralytics YOLO26 y versiones anteriores con una alta eficiencia de FPS por vatio.

Tarjetas aceleradoras

Estas tarjetas permiten la aceleración de la IA en los dispositivos host existentes, lo que facilita las implementaciones brownfield.

ProductoFactor de formaCalcularRendimiento (INT8)Aplicación Objetivo
Metis PCIe x4PCIe Gen3 x164x Metis AIPUs856 TOPSAnalítica de vídeo de alta densidad, ciudades inteligentes
Metis PCIe x1PCIe Gen3 x11x Metis AIPU214 TOPSPCs industriales, gestión de colas minorista
Metis M.2M.2 2280 M-Key1x Metis AIPU214 TOPSDrones, robótica, dispositivos médicos portátiles
Metis M.2 MAXM.2 22801x Metis AIPU214 TOPSEntornos que requieren una gestión térmica avanzada

Sistemas Integrados

Para soluciones llave en mano, Axelera se asocia con fabricantes para proporcionar sistemas prevalidados para el Metis AIPU.

  • Placa de cómputo Metis: Un dispositivo de borde independiente que combina el Metis AIPU con una CPU ARM Rockchip RK3588.
  • Estaciones de trabajo: Torres empresariales de Dell (Precision 3460XE) y Lenovo (ThinkStation P360 Ultra).
  • PCs industriales: Sistemas robustecidos de Advantech y Aetina diseñados para la automatización de la fabricación.

Tareas admitidas

Actualmente, los modelos de detect de objetos pueden exportarse al formato Axelera. Se están integrando tareas adicionales:

TareaEstado
Detección de objetos✅ Compatible
Estimación de posePróximamente
SegmentaciónPróximamente
Cajas Delimitadoras OrientadasPróximamente

Instalación

Requisitos de la Plataforma

La exportación al formato Axelera requiere:

  • Sistema Operativo: Solo Linux (Ubuntu 22.04/24.04 recomendado)
  • Hardware: acelerador de IA Axelera (dispositivos Metis)
  • Python: Versión 3.10 (3.11 y 3.12 próximamente)

Instalación de Ultralytics

pip install ultralytics

Para obtener instrucciones detalladas, consulte nuestra guía de instalación de Ultralytics. Si encuentra dificultades, consulte nuestra guía de problemas comunes.

Instalación del Controlador de Axelera

  1. Añada la clave del repositorio de Axelera:

    sudo sh -c "curl -fsSL https://software.axelera.ai/artifactory/api/security/keypair/axelera/public | gpg --dearmor -o /etc/apt/keyrings/axelera.gpg"
    
  2. Añada el repositorio a apt:

    sudo sh -c "echo 'deb [signed-by=/etc/apt/keyrings/axelera.gpg] https://software.axelera.ai/artifactory/axelera-apt-source/ ubuntu22 main' > /etc/apt/sources.list.d/axelera.list"
    
  3. Instale el SDK y cargue el controlador:

    sudo apt update
    sudo apt install -y axelera-voyager-sdk-base
    sudo modprobe metis
    yes | sudo /opt/axelera/sdk/latest/axelera_fix_groups.sh $USER
    

Exportación de modelos YOLO a Axelera

Exporte sus modelos YOLO entrenados utilizando el comando de exportación estándar de Ultralytics.

Exportar al formato Axelera

from ultralytics import YOLO

# Load a YOLO26 model
model = YOLO("yolo26n.pt")

# Export to Axelera format
model.export(format="axelera")  # creates 'yolo26n_axelera_model' directory
yolo export model=yolo26n.pt format=axelera

Argumentos de exportación

ArgumentoTipoPredeterminadoDescripción
formatstr'axelera'Formato de destino para el hardware AIPU Metis de Axelera
imgszint o tuple640Tamaño de imagen para la entrada del modelo
int8boolTrueHabilitar cuantificación INT8 para AIPU
datastr'coco128.yaml'Configuración del conjunto de datos para la calibración de cuantificación
fractionfloat1.0Fracción del conjunto de datos para la calibración (se recomiendan 100-400 imágenes)
devicestrNoneDispositivo de exportación: GPU (device=0) o CPU (device=cpu)

Para todas las opciones de exportación, consulte la documentación del modo de exportación.

Estructura de Salida

yolo26n_axelera_model/
├── yolo26n.axm              # Axelera model file
└── metadata.yaml            # Model metadata (classes, image size, etc.)

Ejecutando la inferencia

Cargue el modelo exportado con la API de Ultralytics y ejecute la inferencia, de forma similar a la carga de modelos ONNX.

Inferencia con el modelo Axelera

from ultralytics import YOLO

# Load the exported Axelera model
model = YOLO("yolo26n_axelera_model")

# Run inference
results = model("https://ultralytics.com/images/bus.jpg")

# Process results
for r in results:
    print(f"Detected {len(r.boxes)} objects")
    r.show()  # Display results
yolo predict model='yolo26n_axelera_model' source='https://ultralytics.com/images/bus.jpg'

Problema conocido

La primera ejecución de inferencia puede lanzar un ImportError. Las ejecuciones posteriores funcionarán correctamente. Esto se abordará en una futura versión.

Rendimiento de la Inferencia

La AIPU Metis maximiza el rendimiento minimizando el consumo de energía.

MétricaMetis PCIe x4Metis M.2Nota
Rendimiento máximo856 TOPS214 TOPSPrecisión INT8
FPS de YOLOv5m~1539 FPS~326 FPSEntrada de 640x640
FPS de YOLOv5sN/A~827 FPSEntrada de 640x640
EficienciaAltaMuy altoIdeal para alimentación por batería

Puntos de referencia basados en datos de Axelera AI. Los FPS reales dependen del tamaño del modelo, el procesamiento por lotes y la resolución de entrada.

Aplicaciones en el mundo real

Ultralytics YOLO en hardware de Axelera permite soluciones avanzadas de computación en el borde:

  1. Entrene su modelo utilizando el modo de entrenamiento de Ultralytics
  2. Exportar a formato Axelera utilizando model.export(format="axelera")
  3. Validar precisión con yolo val para verificar la pérdida mínima de cuantificación
  4. Predecir usando yolo predict para validación cualitativa

Verificación del Estado del Dispositivo

Verifique que su dispositivo Axelera esté funcionando correctamente:

. /opt/axelera/sdk/latest/axelera_activate.sh
axdevice

Para diagnósticos detallados, consulte la documentación de AxDevice.

Rendimiento Máximo

Esta integración utiliza una configuración de un solo núcleo para compatibilidad. Para producción que requiera el máximo rendimiento, el SDK Axelera Voyager ofrece:

  • Utilización multinúcleo (AIPU Metis de cuatro núcleos)
  • Pipelines de inferencia en streaming
  • Inferencia por teselas para cámaras de mayor resolución

Consulte el model-zoo para puntos de referencia de FPS o contacte a Axelera para soporte de producción.

Problemas Conocidos

Limitaciones Conocidas

  • Compatibilidad con PyTorch 2.9: El primer yolo export format=axelera comando puede fallar debido a la degradación automática de PyTorch a 2.8. Ejecute el comando una segunda vez para que tenga éxito.

  • Limitaciones de energía M.2: Los modelos grandes o extragrandes pueden encontrar errores en tiempo de ejecución en aceleradores M.2 debido a restricciones de la fuente de alimentación.

  • Error de importación en la primera inferencia: La primera ejecución de inferencia puede lanzar un ImportError. Las ejecuciones posteriores funcionan correctamente.

Para soporte, visite la Comunidad Axelera.

Preguntas frecuentes

¿Qué versiones de YOLO son compatibles con Axelera?

El SDK de Voyager es compatible con la exportación de modelos YOLOv8 y YOLO26.

¿Puedo desplegar modelos entrenados a medida?

Sí. Cualquier modelo entrenado usando el Modo de entrenamiento de Ultralytics se puede exportar al formato Axelera, siempre que utilice capas y operaciones compatibles.

¿Cómo afecta la cuantificación INT8 a la precisión?

El SDK Voyager de Axelera cuantifica automáticamente los modelos para la arquitectura AIPU de precisión mixta. Para la mayoría de las detección de objetos tareas, las mejoras de rendimiento (mayor FPS, menor consumo de energía) superan significativamente el impacto mínimo en mAP. La cuantificación tarda desde segundos hasta varias horas, dependiendo del tamaño del modelo. Ejecute yolo val después de la exportación para verificar la precisión.

¿Cuántas imágenes de calibración debo usar?

Recomendamos de 100 a 400 imágenes. Más de 400 no proporciona ningún beneficio adicional y aumenta el tiempo de cuantificación. Experimente con 100, 200 y 400 imágenes para encontrar el equilibrio óptimo.

¿Dónde puedo encontrar el SDK de Voyager?

El SDK, los controladores y las herramientas del compilador están disponibles a través del Portal para desarrolladores de Axelera.



📅 Creado hace 2 meses ✏️ Actualizado hace 7 días
glenn-jocherpderrengerambitious-octopusonuralpszr

Comentarios