如何使用 Ultralytics 导出非 YOLO PyTorch 模型#

Ultralytics 在 ultralytics.utils.export 下提供独立的导出工具，通过统一一致的接口封装多个后端。你可以将任意 torch.nn.Module 导出为 TorchScript、ONNX、OpenVINO、CoreML、Core AI、TensorFlow SavedModel、TensorFlow Frozen Graph、PaddlePaddle、MNN、NCNN和 ExecuTorch，无需分别学习每种后端。其中包括 timm 图像模型、torchvision 分类器和检测器，以及你自己的自定义架构。

将 PyTorch 模型部署到生产环境，通常意味着需要为每个目标分别使用不同的导出器：用于 ONNX 的 torch.onnx.export、用于 Apple 设备的 coremltools、用于 TensorFlow 的 onnx2tf、用于 NCNN 的 pnnx，等等。每种工具都有自己的 API、依赖项特性和输出约定。这些工具将上述流程整合为一种统一的调用模式。

为什么使用 Ultralytics 导出非 YOLO 模型？#

• 一种 API 支持 11 种格式：学习一种调用约定，而不是十几种。
• 与 YOLO 导出使用相同代码路径：每种 Ultralytics YOLO 导出都使用相同的辅助函数。
• 支持 FP16 和 INT8 量化：对于支持的格式，只需使用一个 quantize 参数。
• 支持 CPU：导出步骤本身无需 GPU，因此你可以在笔记本电脑上本地运行；CoreML 导出不支持 Windows，而 Core AI 导出需要运行 macOS 26 或更高版本的 Apple silicon 设备，或使用 glibc 2.34 或更高版本的 x86_64 Linux，并搭配 Python 3.11 至 3.14。

快速入门#

最快的方法是用两行代码导出为 ONNX，无需 YOLO 代码，除 pip install ultralytics onnx timm 外也无需其他设置：

import timm
import torch

from ultralytics.utils.export import torch2onnx

model = timm.create_model("resnet18", pretrained=True).eval()
torch2onnx(model, torch.randn(1, 3, 224, 224), output_file="resnet18.onnx")

支持的导出格式#

torch2* 函数接收一个标准的 torch.nn.Module 和一个示例输入张量。MNN、TF SavedModel 和 TF Frozen Graph 会通过 ONNX 或 Keras 中间产物进行转换。两种情况下都不需要 YOLO 专用属性。

分步示例#

以下每个示例都使用相同的设置：一个处于评估模式的预训练 timm ResNet-18：

import timm
import torch

model = timm.create_model("resnet18", pretrained=True).eval()
im = torch.randn(1, 3, 224, 224)

导出为 ONNX#

from ultralytics.utils.export import torch2onnx

torch2onnx(model, im, output_file="resnet18.onnx")

要使用动态批次大小，请传入一个 dynamic 字典：

torch2onnx(model, im, output_file="resnet18_dyn.onnx", dynamic={"images": {0: "batch_size"}})

默认 opset 为 14，默认输入名称为 "images"。你可以通过 opset、input_names 或 output_names 参数进行覆盖。

导出为 TorchScript#

无需额外依赖。底层使用 torch.jit.trace。

from ultralytics.utils.export import torch2torchscript

torch2torchscript(model, im, output_file="resnet18.torchscript")

导出为 OpenVINO#

from ultralytics.utils.export import torch2openvino

ov_model = torch2openvino(model, im, output_dir="resnet18_openvino_model")

该目录包含一对名称固定的 model.xml 和 model.bin 文件：

resnet18_openvino_model/
├── model.xml
└── model.bin

传入 dynamic=True 可使用动态输入形状，传入 quantize=16 可使用 FP16，传入 quantize=8 可进行 INT8 量化。INT8 还需要 calibration_dataset 参数。

需要 openvino>=2024.0.0（或 macOS 15.4+ 上的 >=2025.2.0）以及 torch>=2.1。

导出为 CoreML#

import coremltools as ct

from ultralytics.utils.export import torch2coreml

inputs = [ct.TensorType("input", shape=(1, 3, 224, 224))]
ct_model = torch2coreml(model, inputs, im, classifier_names=None, output_file="resnet18.mlpackage")

对于分类模型，将类别名称列表传入 classifier_names，即可为 CoreML 模型添加分类头。

需要 coremltools>=9.0、torch>=1.11 和 numpy<=2.3.5。不支持 Windows。

导出为 Core AI#

from ultralytics.utils.export import torch2coreai

torch2coreai(model, im, output_file="resnet18.aimodel")

.aimodel 资产是一个目录：

resnet18.aimodel/
├── main.mlirb
├── main.hash
└── metadata.json

导出可在运行 macOS 26 或更高版本的 Apple silicon 设备上进行，也可在使用 glibc 2.34 或更高版本的 x86_64 Linux 上进行，需搭配 Python 3.11 至 3.14（pip install coreai-torch）；quantize=16 会写入一个接收 float16 输入的 FP16 资产，该资产可在 iOS 27 和 macOS 27 上运行。请参阅 Core AI 集成，其中也说明了会在加载时中止的 FP16 资产。

导出为 TensorFlow SavedModel#

TF SavedModel 导出会通过 ONNX 作为中间步骤：

from ultralytics.utils.export import onnx2saved_model, torch2onnx

torch2onnx(model, im, output_file="resnet18.onnx")
keras_model = onnx2saved_model("resnet18.onnx", output_dir="resnet18_saved_model")

该函数会返回一个 Keras 模型，并在输出目录中生成 FP32 和 FP16 LiteRT 文件（.tflite）：

resnet18_saved_model/
├── saved_model.pb
├── variables/
├── assets/
├── fingerprint.pb
├── resnet18_float32.tflite
└── resnet18_float16.tflite

传入 quantize=8，即可在这些文件旁边添加 INT8 .tflite。

使用 Python 3.13 或更高版本时，TensorFlow 无法在 macOS 上导出；请在 macOS 上使用 Python 3.12 或更早版本，或者使用 Linux。

Python 3.12 或更早版本的要求（Python 3.13 或更高版本的导出则需要改用 tensorflow>2.19.0、tf_keras>2.19.0、 onnx2tf>=2.3.0,<2.3.16 和 protobuf>=6.31.1,<7.0.0）：

• tensorflow>=2.0.0,<=2.19.0
• onnx2tf>=1.26.3,<1.29.0
• tf_keras<=2.19.0
• sng4onnx>=1.0.1
• onnx_graphsurgeon>=0.3.26
• macOS 上的 ai-edge-litert>=1.2.0,<1.4.0（其他平台上的 ai-edge-litert>=1.2.0）
• onnxslim>=0.1.82
• onnx>=1.12.0,<2.0.0
• protobuf>=5

导出为 TensorFlow Frozen Graph#

继续使用上面的 SavedModel 导出结果，将返回的 keras_model 转换为冻结的 .pb 图：

from pathlib import Path

from ultralytics.utils.export import keras2pb

keras2pb(keras_model, output_file=Path("resnet18_saved_model/resnet18.pb"))

导出为 NCNN#

from ultralytics.utils.export import torch2ncnn

torch2ncnn(model, im, output_dir="resnet18_ncnn_model")

该目录包含名称固定的 param 和 bin 文件，以及一个 Python 封装器：

resnet18_ncnn_model/
├── model.ncnn.param
├── model.ncnn.bin
└── model_ncnn.py

导出为 MNN#

MNN 导出需要 ONNX 文件作为输入。请先导出为 ONNX，然后再进行转换：

from ultralytics.utils.export import onnx2mnn, torch2onnx

torch2onnx(model, im, output_file="resnet18.onnx")
onnx2mnn("resnet18.onnx", output_file="resnet18.mnn")

支持 FP16 的 quantize=16 和 INT8 量化的 quantize=8。需要 MNN>=2.9.6 和 torch>=1.10。

导出为 PaddlePaddle#

from ultralytics.utils.export import torch2paddle

torch2paddle(model, im, output_dir="resnet18_paddle_model")

该目录包含 PaddlePaddle 模型和参数文件：

resnet18_paddle_model/
├── inference_model/
│   ├── model.json
│   └── model.pdiparams
├── model.pdparams
└── x2paddle_code.py

需要 x2paddle，以及适用于你平台的 PaddlePaddle 发行版：

• CUDA 上的 paddlepaddle-gpu>=3.0.0,<3.3.0
• ARM64 CPU 上的 paddlepaddle==3.0.0
• 其他 CPU 上的 paddlepaddle>=3.0.0,<3.3.0

NVIDIA Jetson 不支持。

导出为 ExecuTorch#

from ultralytics.utils.export import torch2executorch

torch2executorch(model, im, output_dir="resnet18_executorch_model")

导出的 .pte 文件保存在输出目录中：

resnet18_executorch_model/
└── model.pte

需要 torch>=2.9.0 和匹配的 ExecuTorch 运行时（pip install executorch）。有关运行时用法，请参阅 ExecuTorch 集成。

验证导出的模型#

导出后，在部署前验证数值结果是否与原始 PyTorch 模型一致。使用 ultralytics.nn.backends 中的 ONNXBackend 进行快速冒烟测试，可以比较输出并及早发现跟踪或量化错误：

import numpy as np
import timm
import torch

from ultralytics.nn.backends import ONNXBackend

model = timm.create_model("resnet18", pretrained=True).eval()
im = torch.randn(1, 3, 224, 224)
with torch.no_grad():
    pytorch_output = model(im).numpy()

onnx_model = ONNXBackend("resnet18.onnx", device=torch.device("cpu"))
onnx_output = onnx_model(im)[0]

diff = np.abs(pytorch_output - onnx_output).max()
print(f"Max difference: {diff:.6f}")  # ~1e-5 for an FP32 ONNX export

对于其他运行时，输入张量名称可能不同。例如，OpenVINO 使用模型的 forward 参数名称（通用模型通常为 x），而 torch2onnx 默认使用 "images"。

运行导出的模型#

导出的非 YOLO 模型可通过常规 YOLO() API 重新加载。上述导出文件不包含 Ultralytics 任务或输入尺寸元数据，因此请显式传入 task，并传入与导出时所用示例张量匹配的 imgsz：

from ultralytics import YOLO

results = YOLO("resnet18.onnx", task="classify")("path/to/image.jpg", imgsz=224)
print(results[0].probs.top1)

当导出模型具有固定输入形状时，imgsz 很重要：上述 ONNX 和 TF SavedModel 导出不接受默认值 640。上述 TorchScript 和 NCNN 导出确实接受其他尺寸，但两种导出器都不保证这一点：它们都根据示例张量进行跟踪，因此，如果模型展平为 Linear 层，该层的形状就会固定。请检查你自己的导出模型。

随后，该值会向上取整为模型步幅的倍数；没有元数据时，步幅为 32。因此，固定形状为 200x200 的导出模型实际会接收 224x224 的输入并被拒绝，即使 imgsz=200 与其匹配也是如此。对于不是 32 的倍数的输入尺寸，请直接调用后端。

直接调用后端#

对于未经 Ultralytics 预处理和后处理的原始张量，请使用 ultralytics.nn.backends 中各格式对应的类，就像上面的验证示例那样。每个类都接收导出产物和设备，并且可以直接调用：

TensorFlowBackend 支持两种格式，默认使用 format="saved_model"，因此对于冻结图，请传入 format="pb"。

通过 YOLO() 路径可以自动处理、但直接调用无法处理的三件事：

• 输入布局：CoreMLBackend 和 TensorFlowBackend 要求输入为 BHWC。请先使用 im.permute(0, 2, 3, 1) 进行转置；BCHW 张量会导致形状不匹配。
• Autograd：请将调用封装在 torch.inference_mode() 中。TorchScriptBackend 返回的张量仍携带 梯度计算图。
• 后处理：没有元数据时，后端会将 task 保留为 None，并将 names 置空。LiteRTBackend 仍会按图像尺寸对任何 3-D 输出进行反归一化，并假定输出包含 YOLO 边界框；对于输出为 3-D 的非 YOLO 模型，这种处理并不正确。分类 logits 等二维输出不受影响。

已知限制#

• 多输入支持不一致：对于具有多个输入的模型，torch2onnx、torch2openvino 和 torch2torchscript 接受由示例张量组成的元组。torch2coreml、torch2coreai、torch2ncnn、torch2paddle 和 torch2executorch 则假定只有一个输入张量。
• 仅适用于 YOLO 的格式：Axelera 和 Sony IMX500 导出需要 YOLO 专用模型属性，因此通用模型无法使用。
• 平台专用格式：TensorRT 需要 NVIDIA GPU。RKNN 需要 rknn-toolkit2 SDK（仅限 Linux）。Edge TPU 需要 edgetpu_compiler 二进制文件（仅限 x86_64 Linux）。

结论#

这些工具可通过统一的 API，将任何 PyTorch 模型从普通的 torch.nn.Module 转换为可用于部署的 ONNX、OpenVINO、CoreML、TensorFlow 或移动运行时产物。验证数值一致性，确认结果与原始模型相符后，选择与你的目标硬件匹配的格式，再参阅对应的集成指南，了解特定运行时的部署步骤。

常见问题#