کتاب صوتی یادگیری تقویتی چندعامله: کلید حل مشکلات پیچیده مدیریت داده

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره یادگیری تقویتی چندعامله: کلید حل مشکلات پیچیده مدیریت داده

موضوع کلی: یادگیری تقویتی چندعامله (MARL)

موضوع میانی: یادگیری تقویتی چندعامله برای بهینه‌سازی سیستم‌های مدیریت داده

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر یادگیری تقویتی چندعامله
• 2. مفاهیم پایه یادگیری تقویتی
• 3. یادگیری تقویتی بدون مدل
• 4. یادگیری تقویتی با مدل
• 5. توابع ارزش و سیاست
• 6. تفاوت میان ارزش و سیاست
• 7. یادگیری تطبیقی (Q-Learning)
• 8. یادگیری تطبیقی عمیق (DQN)
• 9. معماری‌های شبکه‌های عصبی برای DQN
• 10. تکنیک‌های بهبود DQN
• 11. بازیابی تجربه (Experience Replay)
• 12. هدف‌گذاری (Prioritized Experience Replay)
• 13. شبکه‌های عصبی دوگان (Double DQN)
• 14. دقت‌بخشی به DQN (Dueling DQN)
• 15. شبکه‌های عصبی نوسانی (Noisy DQN)
• 16. یادگیری تقویتی مبتنی بر سیاست
• 17. گرادیان سیاست (Policy Gradients)
• 18. روش REINFORCE
• 19. روش Actor-Critic
• 20. روش A2C (Advantage Actor-Critic)
• 21. روش A3C (Asynchronous Advantage Actor-Critic)
• 22. روش PPO (Proximal Policy Optimization)
• 23. روش TRPO (Trust Region Policy Optimization)
• 24. یادگیری تقویتی چندعامله (MARL)
• 25. مفاهیم پایه MARL
• 26. انواع هماهنگی در MARL
• 27. هماهنگی متمرکز
• 28. هماهنگی غیرمتمرکز
• 29. چالش‌های MARL
• 30. محیط‌های مشترک در MARL
• 31. محیط‌های مجزا در MARL
• 32. یادگیری تطبیقی در MARL
• 33. یادگیری تطبیقی متمرکز
• 34. یادگیری تطبیقی غیرمتمرکز
• 35. استفاده از شبکه‌های عصبی کانولوشنال در MARL
• 36. استفاده از شبکه‌های عصبی بازگشتی در MARL
• 37. یادگیری مبتنی بر سیاست در MARL
• 38. گرادیان سیاست در MARL
• 39. Actor-Critic در MARL
• 40. روش MADDPG (Multi-Agent Deep Deterministic Policy Gradient)
• 41. روش COMA (Counterfactual Multi-Agent Policy Gradients)
• 42. روش QMIX
• 43. روش VDN (Value Decomposition Networks)
• 44. روش QTRAN
• 45. روش MAPPO (Multi-Agent Proximal Policy Optimization)
• 46. یادگیری تقویتی با ارتباطات
• 47. یادگیری تقویتی با ارتباطات صریح
• 48. یادگیری تقویتی با ارتباطات ضمنی
• 49. شبکه‌های ارتباطی (Communication Networks)
• 50. تکنیک‌های آموزش ارتباطات
• 51. کاربرد MARL در رباتیک
• 52. کاربرد MARL در بازی‌ها
• 53. کاربرد MARL در سیستم‌های توزیع‌شده
• 54. کاربرد MARL در شبکه‌های حسگر
• 55. کاربرد MARL در مدیریت ترافیک
• 56. کاربرد MARL در هوش مصنوعی جمعی
• 57. کاربرد MARL در اقتصاد
• 58. مدل‌سازی محیط‌های پیچیده برای MARL
• 59. طراحی توابع پاداش برای MARL
• 60. ارزیابی عملکرد عامل‌های چندگانه
• 61. شبیه‌سازی محیط‌های MARL
• 62. ابزارهای شبیه‌سازی MARL (مانند PettingZoo)
• 63. پیاده‌سازی الگوریتم‌های MARL با کتابخانه‌های پایتون
• 64. کتابخانه Ray RLlib
• 65. کتابخانه Stable-Baselines3
• 66. کتابخانه Acme
• 67. روش‌های اکتشاف در MARL
• 68. یادگیری تقویتی با اکتشاف مبتنی بر کنجکاوی
• 69. یادگیری تقویتی با اکتشاف مبتنی بر عدم قطعیت
• 70. یادگیری تقویتی با اکتشاف مبتنی بر داده
• 71. یادگیری تقویتی با اکتشاف مبتنی بر پاداش
• 72. مدل‌سازی عدم قطعیت در MARL
• 73. یادگیری تقویتی با شبکه‌های عصبی احتمالی
• 74. انتقال یادگیری در MARL
• 75. یادگیری تقویتی انتقالی از محیط‌های ساده به پیچیده
• 76. یادگیری تقویتی انتقالی بین وظایف
• 77. یادگیری تقویتی انتقالی در رباتیک
• 78. یادگیری تقویتی با داده‌های واقعی
• 79. سازگاری عامل‌ها با تغییرات محیطی
• 80. یادگیری تقویتی با عامل‌های ناهمگن
• 81. یادگیری تقویتی با عامل‌های نامتقارن
• 82. بهینه‌سازی پارامترها در MARL
• 83. تنظیم ابرپارامترها در MARL
• 84. روش‌های تنظیم ابرپارامترها (مانند Hyperopt)
• 85. ملاحظات اخلاقی در MARL
• 86. پیامدهای اجتماعی MARL
• 87. امنیت در سیستم‌های MARL
• 88. تحلیل پایداری در MARL
• 89. طراحی عامل‌های مقاوم در برابر حملات
• 90. بررسی تعاملات عامل‌ها در طول زمان
• 91. مصورسازی رفتار عامل‌های چندگانه
• 92. مقدمه‌ای بر شبکه‌های عصبی گراف (GNN) در MARL
• 93. کاربرد GNN در مدل‌سازی روابط بین عامل‌ها
• 94. کاربرد GNN در هماهنگی عامل‌ها
• 95. تحلیل پیشرفته تعاملات در MARL
• 96. مدل‌های پیش‌بینی رفتار عامل‌های دیگر
• 97. جمع‌بندی و چشم‌انداز آینده MARL