کتاب صوتی راهنمای عملی یادگیری تقویتی چندعامله در حوزه شبکه‌های سیار

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره راهنمای عملی یادگیری تقویتی چندعامله در حوزه شبکه‌های سیار

موضوع کلی: یادگیری تقویتی چندعامله (MARL)

موضوع میانی: یادگیری تقویتی چندعامله برای مدیریت شبکه‌های ارتباطی سیار

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر یادگیری تقویتی چندعامله
• 2. مفاهیم اساسی یادگیری تقویتی
• 3. عوامل و محیط در یادگیری تقویتی
• 4. تابع پاداش و تابع ارزش
• 5. الگوریتم‌های یادگیری تقویتی مبتنی بر مدل
• 6. الگوریتم‌های یادگیری تقویتی بدون مدل
• 7. یادگیری تقویتی عمیق (Deep RL)
• 8. شبکه‌های عصبی در یادگیری تقویتی
• 9. شبکه‌های عصبی کانولوشنال (CNN) در RL
• 10. شبکه‌های عصبی بازگشتی (RNN) در RL
• 11. معماری‌های یادگیری تقویتی عمیق
• 12. روش‌های جستجوی گرادیان سیاست (Policy Gradient)
• 13. روش‌های مبتنی بر مقدار (Value-based Methods)
• 14. روش‌های ترکیبی (Actor-Critic Methods)
• 15. مقدمه‌ای بر شبکه‌های سیار (Mobile Networks)
• 16. نسل‌های مختلف شبکه‌های سیار
• 17. معماری شبکه‌های سیار نسل پنجم (5G)
• 18. مولفه‌های کلیدی شبکه‌های سیار
• 19. چالش‌ها در شبکه‌های سیار
• 20. مفهوم چندعامله (Multi-agent)
• 21. سیستم‌های چندعامله (MAS)
• 22. تفاوت یادگیری تقویتی تک‌عامله و چندعامله
• 23. ارتباط یادگیری تقویتی با سیستم‌های چندعامله
• 24. مقدمه‌ای بر یادگیری تقویتی چندعامله (MARL)
• 25. انواع سناریوهای MARL
• 26. همکاری در MARL
• 27. رقابت در MARL
• 28. ترکیبی از همکاری و رقابت در MARL
• 29. چالش‌های کلیدی در MARL
• 30. عدم قطعیت در محیط‌های MARL
• 31. مشاهده‌پذیری محدود در MARL
• 32. مقیاس‌پذیری در MARL
• 33. همگرایی الگوریتم‌های MARL
• 34. الگوریتم‌های یادگیری مبتنی بر ارزش در MARM
• 35. Q-learning در محیط‌های چندعامله
• 36. Deep Q-Networks (DQN) در MARL
• 37. Double DQN در MARL
• 38. Dueling DQN در MARL
• 39. الگوریتم‌های مبتنی بر سیاست در MARM
• 40. Policy Gradient در محیط‌های چندعامله
• 41. REINFORCE در MARL
• 42. Actor-Critic در محیط‌های چندعامله
• 43. A2C (Advantage Actor-Critic) در MARL
• 44. A3C (Asynchronous Advantage Actor-Critic) در MARL
• 45. روش‌های مبتنی بر مدل در MARM
• 46. یادگیری تقویتی مبتنی بر شبیه‌ساز در شبکه‌های سیار
• 47. مدل‌سازی رفتار عوامل در شبکه‌های سیار
• 48. بهینه‌سازی تخصیص منابع در شبکه‌های سیار با MARL
• 49. مدیریت ترافیک در شبکه‌های سیار با MARL
• 50. بهبود کیفیت سرویس (QoS) در شبکه‌های سیار با MARL
• 51. امنیت در شبکه‌های سیار با استفاده از MARL
• 52. تشخیص ناهنجاری در شبکه‌های سیار با MARL
• 53. بهینه‌سازی مصرف انرژی در شبکه‌های سیار با MARL
• 54. هدایت (Handover) هوشمند در شبکه‌های سیار با MARL
• 55. تخصیص کانال پویا در شبکه‌های سیار با MARL
• 56. خودسازماندهی در شبکه‌های سیار با MARL
• 57. یادگیری تقویتی مشترک (Joint Learning) در MARL
• 58. یادگیری تقویتی با عامل مرکزی (Centralized MARL)
• 59. یادگیری تقویتی غیرمتمرکز (Decentralized MARL)
• 60. یادگیری تقویتی نیمه‌متمرکز (Semi-Decentralized MARL)
• 61. روش‌های یادگیری نماینده (Representation Learning) در MARL
• 62. یادگیری مبتنی بر عامل (Agent-based Learning)
• 63. استفاده از شبکه‌های عصبی گراف (GNN) در MARL
• 64. یادگیری تقویتی تکاملی (Evolutionary RL)
• 65. یادگیری تقویتی مبتنی بر تقلید (Imitation Learning)
• 66. کاربرد MARL در شبکه‌های سیار هوشمند (IoT)
• 67. کاربرد MARL در شبکه‌های سنسور بی‌سیم
• 68. کاربرد MARL در اتصالات دستگاه به دستگاه (D2D)
• 69. کاربرد MARL در مدیریت انرژی شبکه‌های سیار
• 70. کاربرد MARL در بهینه‌سازی تحرک (Mobility)
• 71. کاربرد MARL در شبکه‌های سیار آینده (6G)
• 72. شبیه‌سازهای یادگیری تقویتی چندعامله
• 73. محیط‌های شبیه‌سازی شبکه‌های سیار
• 74. ارزیابی عملکرد الگوریتم‌های MARL
• 75. معیارهای ارزیابی در MARL
• 76. چالش‌های پیاده‌سازی MARL در دنیای واقعی
• 77. مسائل اخلاقی در MARL
• 78. مباحث پیشرفته در MARL
• 79. یادگیری تقویتی چندعامله با ارتباطات
• 80. یادگیری تقویتی چندعامله با عدم قطعیت مدل
• 81. یادگیری تقویتی چندعامله با اهداف چندگانه
• 82. روش‌های یادگیری فعال (Active Learning) در MARL
• 83. یادگیری تقویتی چندعامله با پاداش‌های پراکنده
• 84. یادگیری تقویتی چندعامله با یادگیری انتقالی (Transfer Learning)
• 85. مطالعات موردی (Case Studies) در MARL برای شبکه‌های سیار
• 86. آینده پژوهی در MARL برای شبکه‌های سیار