Trình chỉnh sửa chú thích

Ultralytics Platform bao gồm một trình chỉnh sửa chú thích mạnh mẽ để dán nhãn hình ảnh với các khung bao (bounding box), đa giác (polygon), điểm mấu chốt (keypoint), hộp xoay (oriented box) và phân loại. Trình chỉnh sửa hỗ trợ vẽ thủ công và chú thích thông minh dựa trên SAM.

graph TB
    subgraph Manual["Manual Tools"]
        A[Box] & B[Polygon] & C[Keypoint] & D[OBB] & E[Classify]
    end
    subgraph AI["AI-Assisted"]
        F[SAM Smart]
    end
    Manual --> H[Save Labels]
    AI --> H

Các loại tác vụ được hỗ trợ

Trình chỉnh sửa chú thích hỗ trợ tất cả 5 loại tác vụ YOLO:

Chi tiết tác vụ

Bắt đầu

Để chú thích hình ảnh:

1. Điều hướng đến tập dữ liệu của bạn
2. Nhấp vào một hình ảnh để mở trình xem toàn màn hình
3. Nhấp Edit để vào chế độ chú thích
4. Chọn công cụ chú thích của bạn từ thanh công cụ
5. Vẽ chú thích trên hình ảnh
6. Nhấp Save khi hoàn tất

graph LR
    A[Open Dataset] --> B[Click Image]
    B --> C[Click Edit]
    C --> D[Draw Annotations]
    D --> E[Save]
    E --> F[Next Image]
    F --> B

    style C fill:#2196F3,color:#fff
    style D fill:#FF9800,color:#fff
    style E fill:#4CAF50,color:#fff

Các chế độ chú thích

Trình chỉnh sửa cung cấp hai chế độ chú thích, có thể chọn từ thanh công cụ:

Công cụ chú thích thủ công

Khung bao (Detect)

Vẽ các hộp hình chữ nhật xung quanh các đối tượng:

1. Vào chế độ chỉnh sửa và chọn Draw
2. Nhấp và kéo để vẽ hình chữ nhật
3. Thả chuột để hoàn thành hộp
4. Chọn một lớp từ menu thả xuống

Đa giác (Segment)

Vẽ mặt nạ đa giác chính xác:

1. Vào chế độ chỉnh sửa và chọn Draw
2. Nhấp để thêm đỉnh, hoặc giữ Shift và di chuyển chuột để vẽ tự do các điểm dày đặc
3. Nhấp vào đỉnh đầu tiên, hoặc nhấn Enter hoặc Escape để đóng đa giác
4. Chọn một lớp từ menu thả xuống

Điểm mấu chốt (Pose)

Chú thích tư thế bằng cách sử dụng các mẫu khung xương. Chọn một mẫu từ thanh công cụ, nhấp một lần để đặt tất cả các điểm mấu chốt, sau đó kéo các điểm mấu chốt riêng lẻ để điều chỉnh vị trí.

1. Vào chế độ chỉnh sửa và chọn Draw
2. Chọn một mẫu khung xương từ bộ chọn mẫu trong thanh công cụ

3. Nhấp vào hình ảnh để đặt tất cả các điểm mấu chốt cùng một lúc
4. Kéo các điểm mấu chốt riêng lẻ để điều chỉnh vị trí của chúng
5. Nhấn Enter để xác nhận hoặc Escape để hủy

Các mẫu khung xương tích hợp

Trình chỉnh sửa bao gồm 5 mẫu tích hợp sẵn:

Các mẫu khung xương tùy chỉnh

Tạo các mẫu tùy chỉnh cho bất kỳ cấu trúc tư thế nào:

1. Nhấp vào nút + bên cạnh trình chọn mẫu
2. Tùy chọn, nhấp vào Start from... (Bắt đầu từ...) để tải các điểm quan trọng (keypoint) và kết nối từ một mẫu hiện có làm điểm xuất phát
3. Đặt các điểm quan trọng lên canvas bằng cách nhấp chuột
4. Đặt tên cho từng điểm quan trọng và tùy chỉnh màu sắc
5. Kết nối các điểm quan trọng bằng cách chọn hai điểm (các kết nối được vẽ tự động khi bạn đặt các điểm quan trọng theo trình tự)
6. Lưu mẫu để tái sử dụng trên tập dữ liệu của bạn

Các mẫu tùy chỉnh được lưu vào tài khoản của bạn và có sẵn trong tất cả các tập dữ liệu tư thế.

Hộp bao định hướng (OBB)

Vẽ các khung hộp xoay cho các đối tượng nghiêng:

1. Vào chế độ chỉnh sửa và chọn Draw
2. Nhấp và kéo để vẽ một khung hộp ban đầu
3. Sử dụng tay cầm xoay để điều chỉnh góc
4. Kéo các tay cầm góc để thay đổi kích thước
5. Chọn một lớp từ menu thả xuống

Phân loại (Classify)

Gán nhãn lớp ở cấp độ hình ảnh:

1. Vào chế độ chỉnh sửa
2. Một bảng điều khiển bên xuất hiện với các nút chọn lớp
3. Nhấp vào các nút lớp hoặc nhấn phím số 1-9

Gán nhãn thông minh (Smart Annotation)

Gán nhãn thông minh bổ sung tính năng gán nhãn hỗ trợ bởi mô hình vào trình chỉnh sửa. Trong chế độ Smart (Thông minh), bạn có thể sử dụng Segment Anything Model (SAM) để gán nhãn dựa trên cú nhấp chuột hoặc sử dụng các mô hình YOLO được huấn luyện trước của Ultralytics và các mô hình YOLO tự tinh chỉnh của riêng bạn để thêm các dự đoán làm nhãn. Gán nhãn thông minh khả dụng cho các tác vụ detect, segment, và OBB.

Gán nhãn thông minh với SAM

Khi đã chọn một mô hình SAM:

1. Vào chế độ chỉnh sửa và chọn Smart hoặc nhấn S
2. Nhấp vào đối tượng bạn muốn gán nhãn — SAM tạo ra một mặt nạ (mask) ban đầu trong thời gian thực
3. Tinh chỉnh mặt nạ bằng các cú nhấp bổ sung: nhấp bên ngoài mặt nạ hiện tại để thêm vùng phủ, hoặc nhấp bên trong mặt nạ hiện tại để loại bỏ các vùng
4. Nhấn Enter hoặc Escape để lưu nhãn, hoặc bật auto-apply (tự động áp dụng) cho quy trình làm việc chỉ với một cú nhấp

graph LR
    A[Press S] --> B[Left-click Object]
    B --> C[SAM Generates Mask]
    C --> D{Auto-apply?}
    D -->|Yes| E[Mask Applied Automatically]
    D -->|No| F{Accurate?}
    F -->|Yes| G[Enter to Save]
    F -->|No| H[Add +/- Points]
    H --> C

    style A fill:#2196F3,color:#fff
    style C fill:#FF9800,color:#fff
    style E fill:#4CAF50,color:#fff
    style G fill:#4CAF50,color:#fff

Gán nhãn thông minh với SAM có thể tạo ra:

• Đa giác (Polygons) cho các tác vụ phân đoạn
• Khung hộp (Bounding boxes) cho các tác vụ phát hiện
• Khung hộp định hướng (Oriented boxes) cho các tác vụ OBB

Chế độ tự động áp dụng (Auto-Apply)

Chế độ tự động áp dụng giúp tăng tốc độ gán nhãn thông minh bằng cách tự động lưu mặt nạ SAM sau mỗi cú nhấp — không cần nhấn Enter. Chuyển đổi nó bằng nút tự động áp dụng trong thanh công cụ hoặc nhấn A.

Chọn mô hình SAM

Khi chế độ thông minh đang hoạt động, một trình chọn mô hình sẽ xuất hiện trên thanh công cụ. Có năm mô hình SAM khả dụng — hãy chọn dựa trên sự cân bằng giữa tốc độ và độ chính xác phù hợp với tập dữ liệu của bạn:

Việc chuyển đổi mô hình trong khi chế độ thông minh đang hoạt động sẽ tự động khởi tạo lại bộ dự báo cho hình ảnh hiện tại.

Gán nhãn thông minh với YOLO

Khi đã chọn một mô hình YOLO, gán nhãn thông minh có thể thêm các dự đoán từ các mô hình được huấn luyện trước của Ultralytics hoặc từ các mô hình bạn tự tinh chỉnh.

1. Vào chế độ chỉnh sửa và chọn Smart hoặc nhấn S
2. Chọn một mô hình YOLO từ trình chọn mô hình trên thanh công cụ (Official hoặc My Models)
3. Nhấp Predict (Dự đoán)
4. Xem lại các nhãn đã thêm và thực hiện bất kỳ điều chỉnh nào cần thiết

Thanh bên lớp

Trình chỉnh sửa gán nhãn bao gồm một thanh bên lớp có thể thu gọn ở phía bên phải của canvas. Thanh bên cung cấp:

• Tìm kiếm lớp: Lọc danh sách lớp bằng cách nhập vào trường tìm kiếm. Nhấn Enter trên kết quả khớp chính xác để chọn nó, hoặc tạo một lớp mới nếu không có kết quả khớp nào.
• Tạo lớp mới trực tiếp: Nhấp Add class (Thêm lớp) ở cuối danh sách, nhập tên và tùy chọn chọn màu tùy chỉnh. Nhấn Enter để tạo.
• Chỉnh sửa tên lớp trực tiếp: Di chuột qua tên lớp và nhấp vào biểu tượng bút chì để đổi tên nó.
• Trình chọn màu: Nhấp vào mẫu màu bên cạnh bất kỳ lớp nào để thay đổi màu của nó.
• Đếm số nhãn mỗi lớp: Mỗi hàng lớp hiển thị một số đếm chỉ số trên của các nhãn.
• Mở rộng/thu gọn: Nhấp vào mũi tên để mở rộng một lớp và xem các nhãn riêng lẻ được liệt kê bên dưới nó.
• Đánh dấu di chuột hai chiều: Di chuột qua một nhãn trên canvas sẽ làm nổi bật nó trong thanh bên, và ngược lại. Thanh bên tự động cuộn và tự động mở rộng đến lớp liên quan.
• Ẩn/hiện từng chú thích: Nhấp vào biểu tượng con mắt trên bất kỳ hàng chú thích nào để bật/tắt khả năng hiển thị của nó trên canvas.
• Xóa chú thích: Nhấp vào biểu tượng thùng rác trên bất kỳ hàng chú thích nào để xóa nó.
• Phím tắt: Nhấn 1-9 để chọn nhanh 9 lớp đầu tiên.

Menu ngữ cảnh

Nhấp chuột phải vào các chú thích đã chọn để mở menu ngữ cảnh với:

Điều khiển Hiển thị

Menu thả xuống hiển thị (biểu tượng con mắt) cho phép bạn bật/tắt hiển thị của các phần tử riêng lẻ:

Con trỏ Crosshair

Trong chế độ chỉnh sửa, lớp phủ crosshair sẽ theo dõi vị trí con trỏ và hiển thị tọa độ pixel trên canvas. Điều này giúp đặt các chú thích với độ chính xác cao. Bật/tắt thông qua menu thả xuống hiển thị.

Xem trước di chuột SAM

Trong chế độ Thông minh, SAM cung cấp bản xem trước thời gian thực khi di chuột trước khi bạn nhấp vào bất kỳ điểm nào. Bản xem trước này khả dụng cho các tác vụ detect, segment và OBB. Khi bạn thêm các nhấp chuột tinh chỉnh, bản xem trước sẽ cập nhật để phản ánh mask hiện tại và loại chú thích cho tác vụ đang hoạt động.

Chỉnh sửa đỉnh đa giác

Đối với các chú thích phân đoạn (segment), bạn có thể chỉnh sửa các đỉnh đa giác sau khi vẽ:

• Di chuyển các đỉnh: Kéo bất kỳ tay cầm đỉnh nào để định vị lại
• Xóa các đỉnh: Chọn một đỉnh và nhấn Delete để xóa nó

Quản lý Lớp

Tạo các Lớp

Xác định các lớp chú thích cho tập dữ liệu của bạn trong tab Classes:

1. Điều hướng đến tab Classes
2. Sử dụng trường nhập liệu ở dưới cùng để nhập tên lớp
3. Nhấp vào Add hoặc nhấn Enter
4. Màu sắc được gán tự động từ bảng màu Ultralytics

Thêm Lớp mới trong khi Chú thích

Bạn có thể tạo các lớp mới trực tiếp trong khi chú thích mà không cần rời khỏi trình chỉnh sửa:

1. Vẽ một chú thích trên hình ảnh
2. Trong menu thả xuống lớp, nhấp vào Add New Class
3. Nhập tên lớp
4. Nhấn Enter để tạo và gán

Điều này cho phép quy trình làm việc liền mạch, nơi bạn có thể xác định các lớp khi gặp các loại đối tượng mới trong dữ liệu của mình.

Chỉnh sửa các Lớp

• Đổi tên: Nhấp vào tên lớp trong bảng để chỉnh sửa trực tiếp
• Thay đổi màu sắc: Nhấp vào mẫu màu để mở trình chọn màu
• Tìm kiếm: Sử dụng trường tìm kiếm để lọc các lớp theo tên
• Sắp xếp: Nhấp vào tiêu đề cột để sắp xếp theo tên, số lượng nhãn hoặc số lượng hình ảnh

Màu sắc Lớp

Mỗi lớp được gán một màu từ bảng màu Ultralytics. Bạn có thể tùy chỉnh màu sắc bằng cách sử dụng trình chọn màu trên tab Classes. Màu sắc nhất quán trên toàn bộ nền tảng để dễ nhận diện.

Phím tắt

Chú thích hiệu quả với các phím tắt:

Undo/Redo

Trình chỉnh sửa annotation duy trì lịch sử undo/redo đầy đủ:

• Undo: Cmd/Ctrl+Z
• Redo: Cmd/Ctrl+Y

Lịch sử theo dõi:

• Thêm annotation (đơn lẻ và hàng loạt)
• Chỉnh sửa annotation (di chuyển, thay đổi kích thước, xoay)
• Xóa annotation (đơn lẻ và hàng loạt)
• Thay đổi lớp (đơn lẻ và hàng loạt)
• Sắp xếp lại thứ tự annotation (z-order)
• Chỉnh sửa các đỉnh đa giác (thêm, xóa, di chuyển)
• Di chuyển keypoint

Lưu Annotation

Annotation được lưu khi bạn nhấp vào Save hoặc nhấn Cmd/Ctrl+S:

• Save: Nhấp vào nút lưu hoặc nhấn Cmd/Ctrl+S
• Cancel: Nhấp vào hủy để loại bỏ các thay đổi
• Escape: Lưu nếu có các thay đổi chưa được lưu, nếu không sẽ thoát chế độ chỉnh sửa

Câu hỏi thường gặp (FAQ)

Độ chính xác của annotation SAM là bao nhiêu?

SAM cung cấp mask chất lượng cao cho hầu hết các đối tượng. Độ chính xác phụ thuộc vào:

• Sự khác biệt của đối tượng so với nền
• Chất lượng và độ phân giải hình ảnh
• Số lượng điểm tích cực/tiêu cực được cung cấp

Để có kết quả tốt nhất, hãy bắt đầu bằng cách nhấp vào tâm đối tượng, sau đó sử dụng các nhấp chuột bên ngoài mask để thêm vùng phủ và nhấp chuột bên trong mask để loại bỏ các đối tượng lân cận hoặc nền.

Tôi có thể import các annotation hiện có không?

Có, hãy tải lên tập dữ liệu của bạn với các tệp nhãn định dạng YOLO. Nền tảng sẽ tự động phân tích cú pháp và hiển thị chúng trong trình chỉnh sửa.

Làm thế nào để annotate nhiều đối tượng cùng lớp?

Sau khi vẽ một annotation:

1. Giữ nguyên lớp đã chọn
2. Vẽ annotation tiếp theo
3. Lặp lại cho đến khi tất cả các đối tượng được dán nhãn

Phím tắt 1-9 giúp chọn nhanh các lớp.

Tôi có thể train trên các tập dữ liệu được gán nhãn một phần không?

Có, nhưng để có kết quả tốt nhất:

• Gán nhãn tất cả đối tượng thuộc các lớp mục tiêu trong mỗi hình ảnh
• Sử dụng bộ lọc nhãn được đặt thành Unlabeled để xác định các hình ảnh vẫn cần gán nhãn
• Các hình ảnh không được gán nhãn sẽ bị loại khỏi quá trình train; chỉ các hình ảnh được gán nhãn mới đóng góp vào hàm loss

Tôi nên sử dụng model SAM nào?

SAM 3 là model mặc định và là thế hệ mới nhất — hãy bắt đầu với nó để có mask chất lượng cao nhất. Chuyển sang SAM 2.1 Small cho quy trình tương tác nhanh hơn trên các đối tượng thông thường, hoặc SAM 2.1 Large khi bạn cần độ chính xác mask cao hơn trên các hình dạng phức tạp. Sử dụng SAM 2.1 Tiny để đạt tốc độ tối đa trên các đối tượng đơn giản có độ tương phản cao.

Những tác vụ nào hỗ trợ annotation thông minh SAM?

Annotation thông minh SAM khả dụng cho các tác vụ detect, segment, và OBB. Các tác vụ classification và pose chỉ sử dụng annotation thủ công.

Tôi có thể tạo các mẫu skeleton tùy chỉnh cho pose annotation không?

Có. Nhấp vào nút + bên cạnh bộ chọn mẫu skeleton để mở trình chỉnh sửa mẫu. Đặt các keypoint, đặt tên cho chúng, vẽ các kết nối và lưu lại. Các mẫu tùy chỉnh được lưu trữ trong tài khoản của bạn và khả dụng trên tất cả các tập dữ liệu pose.

Làm thế nào để chuyển đổi giữa các mẫu skeleton?

Nhấp vào menu thả xuống của bộ chọn mẫu trong thanh công cụ annotation. Chọn bất kỳ mẫu tích hợp nào (Người, Tay, Mặt, Chó, Hộp) hoặc các mẫu tùy chỉnh đã lưu của bạn. Mẫu được chọn sẽ xác định các keypoint nào được đặt khi bạn nhấp vào hình ảnh.