تتبّع تجارب YOLO وتصويرها باستخدام Weights & Biases
أصبحت نماذج اكتشاف الكائنات مثل Ultralytics YOLO26 جزءًا أساسيًا من العديد من تطبيقات الرؤية الحاسوبية. لكن تدريب هذه النماذج المعقدة وتقييمها ونشرها ينطوي على تحديات عديدة. ويتطلب تتبّع مقاييس التدريب الرئيسية، ومقارنة إصدارات النماذج، وتحليل سلوك النموذج، واكتشاف المشكلات قدرًا كبيرًا من إعداد أدوات القياس وإدارة التجارب.
شاهد: كيفية استخدام Ultralytics YOLO مع Weights & Biases
يعرض هذا الدليل تكامل Ultralytics YOLO26 مع Weights & Biases من أجل تتبّع التجارب وحفظ ملفات أفضل النماذج وعرض أداء النموذج. ويتضمن أيضًا تعليمات إعداد التكامل والتدريب وعرض النتائج باستخدام الميزات التفاعلية في Weights & Biases.
هل لديك بالفعل نقاط تحقق لـ YOLO مسجلة في W&B؟ استورد مشاريعها إلى منصة Ultralytics من الإعدادات > عمليات التكامل > Weights & Biases.
Weights & Biases#
تُعد Weights & Biases منصة MLOps مصممة لتتبّع تجارب تعلم الآلة وعرضها وإدارتها. وتوفر تسجيلًا تلقائيًا لمقاييس التدريب لضمان إمكانية إعادة التجربة بالكامل، وواجهة تفاعلية لتبسيط تحليل البيانات، وأدوات فعالة لإدارة النماذج ونشرها عبر بيئات متنوعة.
تدريب YOLO26 باستخدام Weights & Biases#
يمكنك استخدام Weights & Biases لزيادة كفاءة عملية تدريب YOLO26 وأتمتتها. يتيح لك التكامل تتبّع التجارب ومقارنة النماذج واتخاذ قرارات مستندة إلى البيانات لتحسين مشاريع الرؤية الحاسوبية.
التثبيت#
لتثبيت الحزم المطلوبة، شغّل:
# Install the required packages for Ultralytics YOLO and Weights & Biases
pip install -U ultralytics wandb
# Enable W&B logging for Ultralytics
yolo settings wandb=Trueللحصول على إرشادات مفصلة وأفضل الممارسات المتعلقة بعملية التثبيت، احرص على مراجعة دليل تثبيت YOLO26. إذا واجهت أي صعوبات أثناء تثبيت الحزم المطلوبة لـYOLO26، فارجع إلى دليل المشكلات الشائعة للاطّلاع على الحلول والنصائح.
تهيئة Weights & Biases#
بعد تثبيت الحزم اللازمة، تتمثل الخطوة التالية في إعداد بيئة Weights & Biases. ويشمل ذلك إنشاء حساب Weights & Biases والحصول على مفتاح API اللازم لضمان اتصال سلس بين بيئة التطوير ومنصة W&B.
ابدأ بتهيئة بيئة Weights & Biases في مساحة العمل. يمكنك إجراء ذلك بتشغيل الأمر التالي واتباع التعليمات التي تظهر.
import wandb
# تهيئة بيئة Weights & Biases (تطلب مفتاح API أو تقرأ WANDB_API_KEY)
wandb.login()انتقل إلى صفحة تفويض Weights & Biases لإنشاء مفتاح API واسترداده. استخدم هذا المفتاح عند مطالبتك به لمصادقة بيئتك مع W&B.
طريقة الاستخدام: تدريب YOLO26 باستخدام Weights & Biases#
from ultralytics import YOLO
# تحميل نموذج YOLO
model = YOLO("yolo26n.pt")
# تدريب النموذج وضبطه الدقيق
model.train(data="coco8.yaml", epochs=5, project="ultralytics", name="yolo26n")ترسم عمليات التشغيل التي ينشئها Ultralytics مخططات لمقاييس التدريب مقابل epoch. إذا بدأت عملية تشغيل باستخدام wandb.init() قبل التدريب، فسيسجّل Ultralytics الدخول إلى تلك العملية، مع قيمة epoch في كل صف، وسيتركها مفتوحة لتتمكن من مواصلة التسجيل فيها واستدعاء wandb.finish() بنفسك. تُضاف وسيطات التدريب إلى إعدادات تلك العملية، وأي مفتاح سبق أن ضبطته أنت أو ضبطته عملية استكشاف W&B يحتفظ بقيمته.
وسيطات W&B#
| المعامل | الافتراضي | الوصف |
|---|---|---|
| project | None | يحدد اسم المشروع الذي يُسجَّل محليًا وفي W&B، ويجمع عمليات التشغيل المتعددة معًا. إذا لم تُحدده، فستُسجَّل عمليات تشغيل W&B في المشروع Ultralytics. |
| name | None | اسم عملية التدريب. ويحدد هذا الاسم المستخدم لإنشاء المجلدات الفرعية والاسم المستخدم لتسجيل البيانات في W&B. |
| save | True | يحدد ما إذا كان سيتم تحميل أفضل نقطة تحقق بوصفها عنصرًا اصطناعيًا للنموذج في W&B. |
إذا أردت تفعيل تسجيل Weights & Biases أو تعطيله في Ultralytics، يمكنك استخدام الأمر yolo settings. يكون تسجيل Weights & Biases معطلًا افتراضيًا.
# Enable Weights & Biases logging
yolo settings wandb=True
# Disable Weights & Biases logging
yolo settings wandb=Falseاضبط WANDB_MODE=offline لتسجيل البيانات دون اتصال بالشبكة، ثم ارفع التشغيل باستخدام wandb sync <save_dir>/wandb/offline-run-*. يؤدي استئناف التدريب باستخدام resume=True إلى متابعة تشغيل W&B نفسه، سواء عبر الإنترنت أو دون اتصال، وعلى كل أنظمة التشغيل، وذلك بقراءة معرّف التشغيل من مجلد التشغيل الأحدث ضمن دليل wandb/ في دليل الحفظ الأصلي؛ لذا أبقِ ذلك الدليل في مكانه.
فهم المخرجات#
بعد تشغيل مقتطف الشفرة أعلاه، يمكنك توقع المخرجات الرئيسية التالية:
- إعداد عملية تشغيل جديدة بمعرّف فريد، ما يشير إلى بدء عملية التدريب.
- ملخص موجز لبنية النموذج، يتضمن عدد الطبقات والمعلمات.
- تحديثات منتظمة للمقاييس المهمة، مثل خسائر التدريب والدقة والاسترجاع ودرجات mAP، خلال كل حقبة تدريب.
- في نهاية التدريب، تُعرض مقاييس تفصيلية، تشمل سرعة استدلال النموذج ومقاييس الدقة الإجمالية.
- روابط إلى لوحة معلومات Weights & Biases لإجراء تحليل متعمق وتصوير عملية التدريب، إلى جانب معلومات عن مواقع ملفات السجل المحلية.
عرض لوحة معلومات Weights & Biases#
بعد تشغيل مقتطف الشفرة، يمكنك الوصول إلى لوحة معلومات Weights & Biases (W&B) عبر الرابط الوارد في المخرجات. وتوفر لوحة المعلومات هذه عرضًا شاملًا لعملية تدريب نموذجك باستخدام YOLO26.
الميزات الرئيسية للوحة معلومات Weights & Biases#
-
تتبّع المقاييس في الوقت الفعلي: راقب المقاييس، مثل الخسارة والدقة ودرجات التحقق، أثناء تغيرها خلال التدريب، لتحصل على رؤى فورية تساعد في ضبط النموذج. تعرّف على كيفية تتبّع التجارب باستخدام Weights & Biases.
-
مقارنة المعلمات الفائقة: يسجل كل تشغيل وسيطات التدريب، مثل معدل التعلّم وحجم الدفعة، لتتمكن من مقارنة الإعدادات بين عمليات التشغيل. لإجراء بحث آلي مع التسجيل في W&B، استخدم Ray Tune.
-
التحليل المقارن: تتيح المنصة مقارنة عمليات تشغيل التدريب المختلفة جنبًا إلى جنب، وهو أمر ضروري لتقييم أثر تهيئات النماذج المتنوعة وفهم التغييرات التي تحسن الأداء.
-
تصوير تقدم التدريب: توفر التمثيلات الرسومية للمقاييس الرئيسية فهمًا بديهيًا لأداء النموذج عبر الحقب. اطّلع على كيفية مساعدة Weights & Biases في تصوير نتائج التحقق.
-
مراقبة الموارد: تابع استخدام CPU وGPU والذاكرة لتحسين كفاءة عملية التدريب وتحديد الاختناقات المحتملة في سير عملك.
-
إدارة عناصر النموذج: يمكنك الوصول إلى أفضل نقطة تحقق للنموذج ومشاركتها، إذ تُرفع بوصفها عنصرًا في W&B في نهاية التدريب، مما يسهّل النشر والتعاون مع أعضاء الفريق في المشاريع المعقدة.
باستخدام هذه الميزات، يمكنك تتبّع تدريب نموذج YOLO26 وتحليله وتحسينه لمهام اكتشاف الكائنات.
الملخص#
تناول هذا الدليل تكامل Ultralytics YOLO مع Weights & Biases، الذي يتتبّع نتائج تدريب النماذج ويعرضها. باستخدام W&B، يمكنك تبسيط سير عمل تعلم الآلة، واتخاذ قرارات مستندة إلى البيانات، وتحسين أداء نموذجك.
لمزيد من التفاصيل، استكشف عرض Soumik Rakshit عن هذا التكامل، الذي قُدّم في YOLO VISION 2023.
الأسئلة الشائعة#
لدمج Weights & Biases مع Ultralytics YOLO26:
-
ثبّت الحزم المطلوبة:
pip install -U ultralytics wandb yolo settings wandb=True -
سجّل الدخول إلى حساب Weights & Biases:
wandb login -
درّب نموذج YOLO26 مع تفعيل التسجيل في W&B:
from ultralytics import YOLO model = YOLO("yolo26n.pt") model.train(data="coco8.yaml", epochs=5, project="ultralytics", name="yolo26n")
سيؤدي ذلك تلقائيًا إلى تسجيل المقاييس والمعلمات الفائقة وعناصر النموذج في مشروعك على W&B.
-
تشمل الميزات الرئيسية ما يلي:
- تتبّع المقاييس في الوقت الفعلي أثناء التدريب
- مقارنة المعلمات الفائقة بين عمليات التشغيل
- تحليل مقارن لعمليات تشغيل التدريب المختلفة
- تصوير تقدم التدريب باستخدام الرسوم البيانية
- مراقبة الموارد (استخدام CPU وGPU والذاكرة)
- إدارة عناصر النموذج ومشاركتها
تساعد هذه الميزات في تتبّع التجارب وتحسين النماذج وتعزيز التعاون في مشاريع YOLO26.
بعد تشغيل نص التدريب البرمجي مع تكامل W&B:
- سيظهر رابط لوحة معلومات W&B في مخرجات وحدة التحكم.
- انقر على الرابط أو انتقل إلى wandb.ai وسجّل الدخول إلى حسابك.
- انتقل إلى مشروعك لعرض المقاييس والتصورات والبيانات التفصيلية لأداء النموذج.
توفر لوحة المعلومات رؤى حول عملية تدريب نموذجك، ما يتيح لك تحليل نماذج YOLO26 وتحسينها بفعالية.
نعم، يمكنك تعطيل التسجيل في W&B باستخدام الأمر التالي:
yolo settings wandb=Falseلإعادة تفعيل التسجيل، استخدم:
yolo settings wandb=Trueيتيح لك ذلك التحكم في وقت استخدام تسجيل W&B دون تعديل نصوص التدريب البرمجية.
تساعد Weights & Biases في تحسين نماذج YOLO26 من خلال:
- توفير تصورات تفصيلية لمقاييس التدريب
- إتاحة مقارنة سهلة بين إصدارات النماذج المختلفة
- تسجيل وسيطات التدريب لكل تشغيل لإجراء مقارنات ضبط المعلمات الفائقة
- إتاحة التحليل التعاوني لأداء النموذج
- تسهيل مشاركة عناصر النموذج والنتائج
تساعد هذه الميزات الباحثين والمطورين على تكرار التجارب بوتيرة أسرع واتخاذ قرارات مستندة إلى البيانات لتحسين نماذج YOLO26.
التعليقات25
اطرح سؤالًا، وشارك نتائجك، أو ساعد شخصًا آخر.
TJdeWet
Hi there,
I would like to know how (if possible) to log more than just these standard metrics for a yolov8 or v11 model during HP tuning logged with wandb: train/loss, val/loss, metrics/accuracy_top1, metrics_accuracy_top5.
This is what the code looks like:
!pip install -U ultralytics wandb !yolo settings wandb=True import wandb from ultralytics import YOLO wandb.login(key="...")
sweep_config = { 'method': "bayes", 'metric': { 'name': 'val/loss', 'goal': 'minimize', }, 'parameters': { .... } }
sweep_id = ...
def train(): run = wandb.init() model = YOLO('yolo11n-cls.pt')
results = model.train( data='...', batch=wandb.config.batch, lr0=wandb.config.lr0, epochs=..., optimizer=..., momentum=..., patience=..., save_period=..., imgsz=..., cache=False, save=True )wandb.agent(sweep_id, train, count=...)
Glenn JocherUltralytics@TJdeWet for custom metric logging beyond default training metrics in YOLO11 with W&B, you can access the complete results dictionary during training and log additional metrics manually through W&B's API. The automatically logged metrics vary by task type (detection/classification), but you can extend them using a callback. For implementation details, refer to the Weights & Biases integration documentation.
marcory-hub
Integration of Weights & Biases with YOLO11 in Google Colab
Is it currently possible to integrate Weights & Biases (W&B) with Ultralytics YOLO11 in Google Colab? If yes, where can I find the correct and up-to-date information to set this up properly?
My Issue
With YOLOv10, I was able to track all my training metrics in W&B seamlessly. However, when trying to replicate this with YOLO11, only GPU and system-related data are logged to the W&B platform. None of the training metrics or results appear.
Summary of things I've Tried
- Following the YouTube tutorial linked at the top of this page.
- Using the Try on Colab button on W&B's site
WARNING: Did not find branch or tag 'feat/ultralytics', assuming revision or ref. error: subprocess-exited-with-error × git checkout -q feat/ultralytics did not run successfully. │ exit code: 1 ╰─> See above for output. note: This error originates from a subprocess, and is likely not a problem with pip. error: subprocess-exited-with-error × git checkout -q feat/ultralytics did not run successfully. │ exit code: 1 ╰─> See above for output. note: This error originates from a subprocess, and is likely not a problem with pip. Note: The Ultralytcs integration will be soon available as a fully supported feature on Weights & Biases once this pull request is merged.This is because the branch https://github.com/wandb/wandb@feat/ultralytics does not exist. To resolve this, I tried various fixes, including following older tutorials and experimenting with suggestions from forums and community discussions.
I’m particularly keen to switch to YOLO11 because it shows significant improvements in wildlife detection when compared to YOLOv10.
Any guidance, updates, or resources on enabling this integration would be greatly appreciated!
Glenn JocherUltralytics@marcory-hub yes, you can integrate Weights & Biases (W&B) with YOLO11 in Google Colab. Please ensure the latest
ultralyticsandwandbpackages are installed usingpip install -U ultralytics wandb. If training metrics are not being logged, ensure your W&B environment is authenticated (wandb.login(key="<API_KEY>")) and thatprojectandnameparameters are correctly specified inmodel.train(). Detailed setup instructions are available in our documentation: https://docs.ultralytics.com/integrations/weights-biases/. Let us know if further assistance is needed!marcory-hub
Thanks for the suggestions, @glenn-jocker ! I tried starting from scratch with W&B with YOLO11 but unfortunately, only system information showed up in W&B.
On top of that, it seems like my Colab runtime might be banned due to a potential issue with a compromised package. Hopefully, they'll restore access soon for everyone affected.
marcory-hub
Good news! My initial code now works for YOLO11. All metrics are automatically saved to W&B, and training is significantly faster than last week without maxing out Colab's RAM.
I'm not sure why it's significantly faster today, but I suspect the previous slowness prevented training from progressing beyond the warmup epochs, resulting in only system information being sent to W&B.
Glenn JocherUltralytics@marcory-hub glad to hear it's working well now, and thank you for sharing your experience! The faster training could indeed be related to runtime or hardware optimizations in Colab. Feel free to explore additional tips and resources in the YOLO11 W&B integration guide to further enhance your workflow. Let us know if you run into any other issues!
Pushtogithub23
I used this code, but it only logs system logs; no training metrics, media, or validation metrics are being logged as shown in the video. How can I log all the training metrics and media as demonstrated in the video? Can anyone help me with this?
from ultralytics import YOLO from wandb.integration.ultralytics import add_wandb_callback wandb.login() wandb.init(project = 'Hand-Gestures-Detection', name = 'yolov8n_5', job_type='training') model = YOLO("yolov8n.pt") add_wandb_callback(model, enable_model_checkpointing=True) model.train(data="HAND-GESTURE-DETECTION-1/data.yaml", epochs=5, imgsz = 640, project = "Hand-Gestures-Detection", name = 'yolov8n_5' )
Glenn JocherUltralytics@Pushtogithub23 to log all training metrics and media with Weights & Biases, ensure you have the latest versions of
ultralyticsandwandbinstalled. Also, verify that your Weights & Biases account is properly authenticated. For detailed setup instructions, visit the Weights & Biases integration guide.
TJdeWet
Hi!
I am using wandb to do hyperparameter tuning. Is it possible to maximise validation mAP50? This seems to be maximising the training mAP50 if I am not mistaken?
metric: name: mAP50 goal: maximise
Otherwise should I do hyperparameter using something like this instead:
metric: name: val/box_loss goal: minimize
Thanks!
Glenn JocherUltralytics(تم التعديل)Hi there!
For your hyperparameter tuning in Weights & Biases, if you're aiming to maximize validation mAP50 specifically, I recommend adjusting your metric settings accordingly. To focus on validation mAP50, your metric configuration might look something like this:
metric: name: metrics/mAP50(B) goal: maximizeThis setup ensures you're targeting the maximization of mAP50 on the validation data directly.
Using
val/box_losswith the goal to minimize can also be effective, especially if you prefer to focus on reducing the box prediction errors during validation:metric: name: val/box_loss goal: minimizeBoth approaches are valid and can be chosen based on your specific model performance goals. Hope this helps! If you have more questions, feel free to ask. 😊
TJdeWet
Hi Glenn,
Thanks for getting back to me. I just tried it, and it doesn't seem that tuning to maximize val/mAP50 is working - the only metrics I see that are being logged are: cls, box, and dfl loss (both train and val), and metrics/mAP50(B), metrics/mAP50-75(B), metrics/Recall(B), and metrics/Precision(B), which I believe are the training metrics? I would like to log those same metrics for validation, and tune based on val/mAP50. Is there a way I can do this?
Thanks!
Glenn JocherUltralytics(تم التعديل)Hi there!
In the Ultralytics W&B integration, validation metrics are logged automatically under names such as
metrics/mAP50(B)andmetrics/mAP50-95(B)(notval/mAP50; theval/prefix is used for validation losses likeval/box_loss). Use that name in your sweep config:metric: name: metrics/mAP50(B) goal: maximizeEnable the integration with
yolo settings wandb=True; no manualwandb.log()call is needed.
JiyongBoo
Is it possible to train RT-DETR model with wandb? In add_wandb_callback() function, there are nothing about rt-detr. I tried replacing yolov8 with rt-detr in the example code. In the result, I confirmed that runs.summary["Validation-Table"] and runs.summary["Train-Table"] did not appear. How do I solve this problem?
Paula DerrengerUltralytics(تم التعديل)@JiyongBoo hi there! 😊 RT-DETR trains with the same built-in Weights & Biases integration as other Ultralytics models, so you don't need
add_wandb_callback()or manualwandb.log()calls. Enable it withyolo settings wandb=True, then train as usual:from ultralytics import RTDETR model = RTDETR("rtdetr-l.pt") model.train(data="coco8.yaml", epochs=5, project="ultralytics", name="rtdetr-l")See the Weights & Biases integration guide for details.
DungHD-1997
from ultralytics import YOLO from wandb.integration.ultralytics import add_wandb_callback import wandb def train(): wandb.login() project_name = "test_ai" # Step 1: Initialize a Weights & Biases run wandb.init(project=project_name, job_type="training",name="old_data")
# Step 2: Define the YOLOv8 Model and Dataset model_name = "yolov8x" dataset_name = "C://Users//Administrator//project//yolov5_train_data//data//slant_2024.yaml" model = YOLO(f"{model_name}.pt") # Step 3: Add W&B Callback for Ultralytics add_wandb_callback(model, enable_model_checkpointing=True) model_name = "train_01" # Step 4: Train and Fine-Tune the Model model.train(project=project_name,name=model_name, data=dataset_name, epochs=100, imgsz=640, batch = 8) # Step 5: Validate the Model model.val() # Step 6: Perform Inference and Log Results #model(["path/to/image1", "path/to/image2"]) # Step 7: Finalize the W&B Run wandb.finish()if name == "main": train() I used the above code to train custom data, but when using wandb, the GPU memory continuously increases over epochs until an out of memory error appears. program has been stopped. Error message: torch.cuda.OutOfMemoryError: CUDA out of memory. Tried to allocate 20.00 MiB. GPU 0 has a total capacity of 15.88 GiB of which 7.62 MiB is free. Of the allocated memory 14.53 GiB is allocated by PyTorch, and 103.44 MiB is reserved by PyTorch but unallocated. If reserved but unallocated memory is large try setting PYTORCH_CUDA_ALLOC_CONF=expandable_segments:True to avoid fragmentation. See documentation for Memory Management (https://pytorch.org/docs/stable/notes/cuda.html#environment-variables)
DungHD-1997
If I don't use wandb, the GPU memory hardly changes over each epoch. Is there something wrong with my code?
Glenn JocherUltralytics(تم التعديل)Hey there! It looks like you're encountering a memory issue related to using Weights & Biases (W&B) with YOLOv8, specifically the GPU running out of memory during training. This can happen for a few reasons, including excessive memory allocation by PyTorch or W&B logging mechanisms. Here are a couple of suggestions that might help:
-
Reduce Batch Size: Lowering the batch size can significantly reduce memory usage. Although this might increase training time, it can help avoid out-of-memory errors.
model.train(batch=4) # Try reducing the batch size -
Clear CUDA Cache: Manually clearing the CUDA cache after each epoch might help release unused memory.
import torch torch.cuda.empty_cache() -
Optimize Model and DataLoader: Ensure that your DataLoader is not the source of the memory leak, and try to optimize your model's memory usage.
-
Disable W&B to isolate the cause: Run
yolo settings wandb=Falseand train again; if the out-of-memory error persists, W&B is not the cause.
Finally, consider profiling your code to identify specific lines or operations that cause the memory spike. PyTorch and W&B offer tools and documentation on best practices to optimize memory usage. 📘
Hope this helps! If the issue persists, feel free to reach out with more details or check the W&B and YOLOv8 docs for more insights.
-
danielst4
Hey there, I am trying to make a sweep using WandB but cant quite put together where to insert what into the YOLO call, to use different hyperparameters and track them. Even though I found a site where one has done this he too doesnt describe what he had to do. I am not sure if it is more complicated than I think and if I really have to insert stuff into the training function or if there is an easy way to achieve this. I would be really greatful for help to know what exactly is necessary to make a WandB hyperparameter sweep with YOLO Thanks Daniel
Paula DerrengerUltralytics(تم التعديل)Hey Daniel 👋,
Great to hear you're exploring hyperparameter sweeps with WandB and YOLO! It's simpler than it might seem at first. Here's a quick guide to get you started:
- Initialize WandB: Before starting your training, make sure to log in to WandB in your script or notebook using:
import wandb wandb.login() - Set Up the Sweep: Define your sweep configuration in WandB, using Ultralytics training argument names for the hyperparameters. For example:
method: random metric: name: val/box_loss goal: minimize parameters: lr0: min: 0.0001 max: 0.001 batch: values: [16, 32, 64] - Integrate Sweep with YOLO: Enable the built-in integration with
yolo settings wandb=True. If a W&B run is already active (as in a sweep agent), Ultralytics logs into it and keeps any config values the sweep already set.import wandb from ultralytics import YOLO def train(): wandb.init(project="your_project_name") model = YOLO("yolov8n.pt") model.train(data="coco128.yaml", epochs=5, imgsz=640, lr0=wandb.config.lr0, batch=wandb.config.batch) - Start the Sweep: Once everything is set up, you can start the sweep in WandB. This will iterate over the defined hyperparameter space, automatically logging each experiment's results.
Remember, the key parts are enabling the W&B setting and making sure your sweep parameter names match Ultralytics training arguments.
Hope this helps! If you have any more questions or run into issues, feel free to ask. Happy sweeping! 🚀
- Initialize WandB: Before starting your training, make sure to log in to WandB in your script or notebook using:
danielst4
Thank you Paula, this helped a lot! I can make a sweep now but I noticed that the values of the parameters which are given from the sweep to the script dont match the parameters used. Even though the command looks like this:
wandb.wandb_agent - INFO - About to run command: /usr/bin/env python training_rtdetr.py --batch=8 --epochs=6 --imgsz=1280 --learning_rate=0.0007013348811086657where "training_rtdetr.py" is a script with the code you gave me. (I am working with the RTDETR but it shouldnt make a difference as the metrics and calls are the same if I understand correctly?) But then after engine/trainer it says its using epochs=100 and it also uses that number for training. So just to be sure about a few things, I already logged in to WandB, I wrote a script with the code from your 3., I went to wandb, created a sweep there with the code from 2. + the lineprogram: training_rtdetr.pyand in a terminal I used the resulting callwandb agent [sweepid]Also I am kinda confused because you used "learning_rate" and "batch_size" but as far as I can tell these are not the parameters I can give for the training and they should be called "lr0" and "batch" respectively (which I both tried but they didnt work) I hope I provided all the necessary information otherwise just tell me what you need to know
Paula DerrengerUltralytics@danielst4 hey Daniel,
It sounds like you're on the right track with setting up your WandB sweep with YOLOv8! Regarding the mismatch in parameter values, it seems like there might be a discrepancy between the parameter names expected by your script and those defined in your WandB sweep configuration.
For YOLOv8, the correct parameter names for learning rate and batch size are indeed
lr0andbatch, respectively. If you're using these parameters in yourtraining_rtdetr.pyscript, ensure they're correctly parsed from the command line arguments. Here's a quick Python snippet usingargparsefor reference:import argparse # Parse command line arguments parser = argparse.ArgumentParser() parser.add_argument('--batch', type=int, help='batch size') parser.add_argument('--epochs', type=int, help='number of epochs') parser.add_argument('--imgsz', type=int, help='image size') parser.add_argument('--learning_rate', type=float, help='learning rate') args = parser.parse_args() # Now you can use args.batch, args.epochs, etc., in your scriptMake sure your WandB sweep configuration uses the same parameter names as those your script expects. For example:
program: training_rtdetr.py method: bayes metric: name: val/box_loss goal: minimize parameters: learning_rate: min: 0.0001 max: 0.001 batch: values: [8, 16, 32] epochs: value: 6 imgsz: value: 1280If you've already done this and the issue persists, it might be helpful to double-check how your script handles these parameters and ensure they're being correctly applied to your YOLOv8 model configuration.
Feel free to share more details if you're still encountering issues. We're here to help! 🚀
J0ELh
Is it possible to remove logging and only log progress in the command line? For my training process yolov8 seems to automatically connect with my wandb account and start logging. This process is very time-consuming so I'd like to know whether there's a flag like
log = Falseor something like that.J0ELh
^ this is because I'm done experimenting and need quick retraining options now.
Glenn JocherUltralytics(تم التعديل)Hey there! 👋 If you're looking to disable automatic logging to Weights & Biases (W&B) during your YOLOv8 training to speed things up, you can do so by setting the
wandbargument toFalsewhen initiating your training command. Here's how you can do it:yolo settings wandb=FalseThis is a global Ultralytics setting, not a train argument, and it stops YOLOv8 from connecting to your W&B account and logging training progress there. Happy training! 🚀