کتاب صوتی طراحی عامل‌های هوشمند برای ربات‌های زیردریایی با MARL

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره طراحی عامل‌های هوشمند برای ربات‌های زیردریایی با MARL

موضوع کلی: یادگیری تقویتی چندعامله (MARL)

موضوع میانی: یادگیری تقویتی چندعامله برای کنترل ربات‌های صنعتی برای انجام وظایف بازرسی و نگهداری زیر آب

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر ربات‌های زیردریایی و چالش‌های محیطی آن‌ها
• 2. مبانی یادگیری تقویتی چند عاملی (MARL)
• 3. معماری‌های پایه در MARL
• 4. تابع پاداش در MARL برای ربات‌های زیردریایی
• 5. مدل‌سازی محیط ربات‌های زیردریایی
• 6. هماهنگی عامل‌ها در MARL
• 7. ارتباطات بین عامل‌ها در MARL
• 8. یادگیری سیاست‌های توزیع‌شده
• 9. یادگیری سیاست‌های متمرکز
• 10. الگوریتم‌های Actor-Critic در MARL
• 11. الگوریتم‌های DQN برای MARL
• 12. الگوریتم‌های PPO برای MARL
• 13. الگوریتم‌های MADDPG
• 14. یادگیری با مشاهده (Imitation Learning) در MARL
• 15. یادگیری تقویتی عمیق (Deep RL) در MARL
• 16. مدل‌های گراف عصبی (GNN) در MARL
• 17. شبکه‌های عصبی بازگشتی (RNN) در MARL
• 18. شبکه‌های عصبی کانولوشنی (CNN) در MARL
• 19. استفاده از یادگیری عمیق در عامل‌های رباتیک
• 20. طراحی تابع پاداش برای وظایف ناوبری ربات زیردریایی
• 21. طراحی تابع پاداش برای وظایف اکتشاف ربات زیردریایی
• 22. طراحی تابع پاداش برای وظایف پایش ربات زیردریایی
• 23. طراحی تابع پاداش برای وظایف نمونه‌برداری ربات زیردریایی
• 24. مدیریت منابع در ربات‌های زیردریایی با MARL
• 25. خودتنظیمی عامل‌ها در MARL
• 26. تخصیص وظیفه پویا در MARL
• 27. تشکیل گروه (Formation Control) ربات‌های زیردریایی
• 28. ناوبری مشارکتی ربات‌های زیردریایی
• 29. شناسایی اهداف توسط ربات‌های زیردریایی
• 30. ردیابی اهداف توسط ربات‌های زیردریایی
• 31. موقعیت‌یابی نسبی ربات‌های زیردریایی
• 32. تشخیص موانع در محیط زیردریایی
• 33. اجتناب از برخورد ربات‌های زیردریایی
• 34. مدیریت انرژی در ربات‌های زیردریایی با MARL
• 35. شارژ بی‌سیم ربات‌های زیردریایی
• 36. بهینه‌سازی مسیر در MARL
• 37. بهینه‌سازی مصرف انرژی در MARL
• 38. قابلیت اطمینان عامل‌ها در MARL
• 39. استحکام عامل‌ها در برابر اختلالات
• 40. یادگیری با پاداش پراکنده
• 41. یادگیری با پاداش منفی
• 42. یادگیری فعال (Active Learning) در MARL
• 43. یادگیری تقویتی از طریق شبیه‌سازی
• 44. اعتبارسنجی مدل‌های MARL
• 45. انتقال یادگیری (Transfer Learning) در MARL
• 46. یادگیری تطبیقی (Adaptive Learning) در MARL
• 47. یادگیری مبتنی بر مدل (Model-Based RL) در MARL
• 48. یادگیری بدون مدل (Model-Free RL) در MARL
• 49. تکنیک‌های اکتشاف (Exploration) در MARL
• 50. تکنیک‌های بهره‌برداری (Exploitation) در MARL
• 51. استانداردهای ارتباطی در MARL
• 52. پروتکل‌های ارتباطی ربات‌های زیردریایی
• 53. امنیت ارتباطات در MARL
• 54. تحلیل ریسک در طراحی عامل‌های MARL
• 55. ارزیابی عملکرد عامل‌های MARL
• 56. متریک‌های ارزیابی در MARL
• 57. تجزیه و تحلیل حساسیت در MARL
• 58. بهینه‌سازی ابرپارامترها (Hyperparameter Optimization)
• 59. مدل‌سازی عدم قطعیت در MARL
• 60. یادگیری تقویتی با قید (Constrained RL)
• 61. یادگیری تقویتی با چند هدف (Multi-Objective RL)
• 62. کاربرد MARL در سیستم‌های خودمختار زیردریایی
• 63. کاربرد MARL در سیستم‌های ناوبری رباتیک
• 64. کاربرد MARL در سیستم‌های پایش محیطی
• 65. کاربرد MARL در سیستم‌های جستجو و نجات
• 66. کاربرد MARL در عملیات اکتشاف منابع
• 67. کاربرد MARL در بازرسی سازه‌های زیردریایی
• 68. کاربرد MARL در مزارع بادی فراساحلی
• 69. کاربرد MARL در مدیریت شیلات
• 70. کاربرد MARL در نظارت بر خطوط لوله
• 71. کاربرد MARL در حفاظت از محیط زیست دریایی
• 72. کاربرد MARL در تحقیقات اقیانوس‌شناسی
• 73. کاربرد MARL در کاوش اعماق دریا
• 74. کاربرد MARL در ربات‌های آموزشی زیردریایی
• 75. کاربرد MARL در ربات‌های امداد و نجات
• 76. کاربرد MARL در ربات‌های نظامی (با رعایت چارچوب‌های قانونی)
• 77. کاربرد MARL در ربات‌های بازرسی
• 78. کاربرد MARL در ربات‌های جمع‌آوری داده
• 79. کاربرد MARL در ربات‌های کاوشگر
• 80. کاربرد MARL در ربات‌های با قابلیت همکاری
• 81. کاربرد MARL در ربات‌های خودمختار
• 82. کاربرد MARL در شبکه‌های ربات‌های زیردریایی
• 83. کاربرد MARL در سیستم‌های ناوبری توزیع‌شده
• 84. مدل‌سازی دینامیکی ربات‌های زیردریایی
• 85. شبیه‌سازهای ربات‌های زیردریایی
• 86. پیاده‌سازی عامل‌های MARL بر روی سخت‌افزار
• 87. تست و اشکال‌زدایی عامل‌های MARL
• 88. نگهداری و به‌روزرسانی عامل‌های MARL
• 89. اخلاقیات در طراحی عامل‌های هوشمند
• 90. مسئولیت‌پذیری در سیستم‌های خودمختار
• 91. قوانین و مقررات مربوط به ربات‌های زیردریایی
• 92. آینده MARL در رباتیک زیردریایی