فلش‌کارت‌های آموزشی یادگیری تقویتی چندعامله برای تصمیم‌گیری هوشمند در شبکه‌های ۵G و فراتر از آن

📚 کتاب آموزشی جامع

📚 اطلاعات کتاب

عنوان کتاب: کتاب یادگیری تقویتی چندعامله برای تصمیم‌گیری هوشمند در شبکه‌های ۵G و فراتر از آن

موضوع کلی: یادگیری تقویتی چندعامله (MARL)

موضوع میانی: یادگیری تقویتی چندعامله برای مدیریت شبکه ارتباطی

📋 سرفصل‌های کتاب (100 موضوع)

• 1. مبانی یادگیری تقویتی
• 2. مقدمه ای بر یادگیری تقویتی
• 3. عناصر کلیدی یادگیری تقویتی
• 4. مسئله مارکوف تصمیم گیری (MDP)
• 5. تابع پاداش
• 6. تابع ارزش
• 7. تابع سیاست
• 8. الگوریتم های یادگیری تقویتی
• 9. یادگیری Q
• 10. یادگیری Q عمیق (DQN)
• 11. یادگیری سیاست گرادیان
• 12. یادگیری Actor-Critic
• 13. مقدمه ای بر یادگیری تقویتی چندعامله (MARL)
• 14. تفاوت های MARL با RL تک عامله
• 15. چالش های MARL
• 16. همکاری در MARL
• 17. رقابت در MARL
• 18. مختلط در MARL
• 19. انواع معماری های MARL
• 20. مبتنی بر عامل مرکزی (Centralized)
• 21. مبتنی بر عامل غیرمتمرکز (Decentralized)
• 22. مبتنی بر عامل ترکیبی (Hybrid)
• 23. الگوریتم های MARL
• 24. تجمیع سیاست (Policy Aggregation)
• 25. تجمیع ارزش (Value Aggregation)
• 26. شبکه های عصبی عمیق در MARL
• 27. شبکه های عصبی کانولوشنال (CNN)
• 28. شبکه های عصبی بازگشتی (RNN)
• 29. شبکه های حافظه کوتاه مدت بلند (LSTM)
• 30. شبکه های ترنسفورمر (Transformer)
• 31. مدل سازی محیط شبکه 5G
• 32. معماری شبکه 5G
• 33. لایه دسترسی رادیویی (RAN)
• 34. هسته شبکه (Core Network)
• 35. شبکه های لبه (Edge Networks)
• 36. ویژگی های کلیدی شبکه 5G
• 37. تاخیر کم (Low Latency)
• 38. پهنای باند بالا (High Bandwidth)
• 39. قابلیت اطمینان بالا (High Reliability)
• 40. اتصال انبوه دستگاه ها (Massive Connectivity)
• 41. سناریوهای کاربردی 5G
• 42. اینترنت اشیاء (IoT)
• 43. خودروهای خودران (Autonomous Vehicles)
• 44. واقعیت افزوده/مجازی (AR/VR)
• 45. صنایع هوشمند (Smart Industries)
• 46. شبکه های 6G
• 47. مفاهیم کلیدی 6G
• 48. فرکانس های بالاتر
• 49. هوش مصنوعی در 6G
• 50. حسگری یکپارچه
• 51. ارتباطات هولوگرافیک
• 52. کاربرد MARL در شبکه 5G
• 53. مدیریت منابع رادیویی (RRM)
• 54. تخصیص پویا طیف (Dynamic Spectrum Allocation)
• 55. مدیریت اتصال (Connection Management)
• 56. مدیریت تحرک (Mobility Management)
• 57. بهینه سازی تحویل (Handover Optimization)
• 58. توازن بار (Load Balancing)
• 59. کیفیت خدمات (QoS) و کیفیت تجربه (QoE)
• 60. مدیریت کیفیت خدمات (QoS Management)
• 61. بهینه سازی کیفیت تجربه (QoE Optimization)
• 62. امنیت شبکه
• 63. تشخیص ناهنجاری (Anomaly Detection)
• 64. پیشگیری از حملات (Attack Prevention)
• 65. مدیریت ترافیک
• 66. بهینه سازی مسیر (Path Optimization)
• 67. کنترل ازدحام (Congestion Control)
• 68. پیش بینی ترافیک (Traffic Prediction)
• 69. شبکه های حسگر بی سیم (WSN)
• 70. مدیریت انرژی (Energy Management)
• 71. گسترش شبکه (Network Deployment)
• 72. بهینه سازی پوشش (Coverage Optimization)
• 73. کاربرد MARL در شبکه های فراتر از 5G (6G)
• 74. تصمیم گیری در محیط های پیچیده تر
• 75. همکاری بین شبکه های مختلف
• 76. هوشمندی توزیع شده
• 77. مدیریت منابع در مقیاس بزرگ
• 78. بهینه سازی لبه و ابر
• 79. پردازش توزیع شده داده
• 80. یادگیری مشترک (Federated Learning)
• 81. امنیت پیشرفته
• 82. رباتیک و سیستم های خودمختار
• 83. مدیریت ناوگان رباتیک
• 84. هماهنگی ربات ها
• 85. ناوبری و اکتشاف
• 86. تعامل انسان و ربات
• 87. سیستم های حمل و نقل هوشمند
• 88. مدیریت ترافیک هوشمند
• 89. بهینه سازی سیگنال های ترافیکی
• 90. مدیریت ناوگان خودروهای خودران
• 91. ارتباطات خودرو به خودرو (V2V)
• 92. ارتباطات خودرو به زیرساخت (V2I)
• 93. شبکه های توزیع شده و غیرمتمرکز
• 94. مدیریت بلاک چین
• 95. امنیت و حریم خصوصی در بلاک چین
• 96. قراردادهای هوشمند (Smart Contracts)
• 97. کاربردهای عملی MARL در 5G و فراتر از آن
• 98. مطالعات موردی (Case Studies)
• 99. پیاده سازی های واقعی
• 100. چالش های پیاده سازی