کتاب صوتی بهینه‌سازی تصمیم‌گیری توزیع‌شده در سیستم‌های مدیریت انرژی با MARL

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره بهینه‌سازی تصمیم‌گیری توزیع‌شده در سیستم‌های مدیریت انرژی با MARL

موضوع کلی: یادگیری تقویتی چندعامله (MARL)

موضوع میانی: یادگیری تقویتی چندعامله برای بهینه‌سازی سیستم‌های مدیریت توزیع انرژی از منابع هوشمند

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر سیستم‌های مدیریت انرژی و چالش‌های توزیع‌شده
• 2. مفاهیم پایه بهینه‌سازی در سیستم‌های توزیع‌شده
• 3. مقدمه‌ای بر یادگیری تقویتی چندعامله (MARL)
• 4. اصول یادگیری تقویتی کلاسیک
• 5. مدل‌های عامل و محیط در MARL
• 6. فضای حالت، عمل و پاداش در MARL
• 7. الگوریتم‌های پایه MARL: Q-learning توزیع‌شده
• 8. الگوریتم‌های پایه MARL: SARSA توزیع‌شده
• 9. چالش‌های هماهنگی در MARL
• 10. چالش‌های پایداری در MARL
• 11. چالش‌های عدم قطعیت در MARL
• 12. چالش‌های ارتباطات در MARL
• 13. معماری‌های عامل در MARL: عامل‌های متمرکز و غیرمتمرکز
• 14. معماری‌های عامل در MARL: عامل‌های نیمه‌متمرکز
• 15. مدل‌های همکاری در MARL
• 16. مدل‌های رقابتی در MARL
• 17. مدل‌های ترکیبی همکاری-رقابت در MARL
• 18. یادگیری سیاست گرادیان در MARL
• 19. الگوریتم‌های Actor-Critic توزیع‌شده
• 20. الگوریتم‌های MADDPG
• 21. الگوریتم‌های COMA
• 22. تکنیک‌های تجزیه مسئله در MARL
• 23. تجزیه مسئله بر اساس ساختار گراف
• 24. تجزیه مسئله بر اساس ساختار زمانی
• 25. تجزیه مسئله بر اساس ساختار پاداش
• 26. روش‌های افزایش مقیاس‌پذیری در MARL
• 27. استفاده از شبکه‌های عصبی عمیق در MARL
• 28. شبکه‌های عصبی کانولوشنی (CNN) در MARL
• 29. شبکه‌های عصبی بازگشتی (RNN) در MARL
• 30. شبکه‌های عصبی ترنسفورمر در MARL
• 31. مدل‌های مبتنی بر حافظه در MARL
• 32. یادگیری انتقالی در MARL
• 33. یادگیری چندوظیفه‌ای در MARL
• 34. یادگیری تقویتی با پاداش ضمنی
• 35. یادگیری تقویتی با پاداش صریح
• 36. طراحی پاداش در سیستم‌های مدیریت انرژی
• 37. پاداش‌های مبتنی بر هزینه‌ها
• 38. پاداش‌های مبتنی بر قابلیت اطمینان
• 39. پاداش‌های مبتنی بر پایداری
• 40. پاداش‌های مبتنی بر کیفیت توان
• 41. کاربرد MARL در بهینه‌سازی تولید انرژی
• 42. بهینه‌سازی تولید انرژی تجدیدپذیر
• 43. بهینه‌سازی تولید انرژی از منابع فسیلی
• 44. بهینه‌سازی ترکیب منابع تولید
• 45. کاربرد MARL در بهینه‌سازی توزیع انرژی
• 46. مدیریت بار در شبکه‌های توزیع‌شده
• 47. بهینه‌سازی جریان توان
• 48. کاهش تلفات در شبکه توزیع
• 49. مدیریت تقاضا با استفاده از MARL
• 50. کاربرد MARL در بهینه‌سازی ذخیره‌سازی انرژی
• 51. بهینه‌سازی شارژ و دشارژ باتری‌ها
• 52. بهینه‌سازی سیستم‌های ذخیره‌سازی حرارتی
• 53. بهینه‌سازی سیستم‌های ذخیره‌سازی هیدروژنی
• 54. کاربرد MARL در مدیریت ریزشبکه‌ها
• 55. هماهنگی ریزشبکه‌ها با شبکه اصلی
• 56. استقلال ریزشبکه‌ها
• 57. ارتباطات بین ریزشبکه‌ها
• 58. کاربرد MARL در مدیریت مصرف انرژی ساختمان‌ها
• 59. بهینه‌سازی سیستم‌های تهویه مطبوع
• 60. بهینه‌سازی سیستم‌های روشنایی
• 61. بهینه‌سازی مصرف لوازم خانگی
• 62. کاربرد MARL در مدیریت خودروهای الکتریکی
• 63. بهینه‌سازی شارژ خودروهای الکتریکی
• 64. مدیریت ناوگان خودروهای الکتریکی
• 65. شبکه‌های شارژ هوشمند
• 66. کاربرد MARL در بازارهای انرژی
• 67. طراحی بازارهای انرژی پویا
• 68. بهینه‌سازی پیشنهادات در بازارهای انرژی
• 69. مدیریت ریسک در بازارهای انرژی
• 70. ارزیابی عملکرد الگوریتم‌های MARL
• 71. معیارهای ارزیابی عملکرد
• 72. شبیه‌سازی سیستم‌های مدیریت انرژی
• 73. مطالعات موردی از کاربرد MARL
• 74. چالش‌های پیاده‌سازی MARL در سیستم‌های واقعی
• 75. مسائل امنیتی در MARL
• 76. مسائل حریم خصوصی در MARL
• 77. اخلاق در MARL
• 78. راهکارهای افزایش استحکام (Robustness) در MARL
• 79. روش‌های تشخیص و مقابله با حملات در MARL
• 80. یادگیری عمیق با پاداش توزیع‌شده
• 81. یادگیری عمیق با پاداش مشترک
• 82. یادگیری عمیق با پاداش تفکیک‌شده
• 83. یادگیری تقویتی مبتنی بر مدل در MARL
• 84. یادگیری تقویتی بدون مدل در MARL
• 85. استفاده از درخت‌های تصمیم در MARL
• 86. استفاده از ماشین‌های بردار پشتیبان در MARL
• 87. روش‌های یادگیری فدرال در MARL
• 88. کاربرد MARL در پیش‌بینی بار
• 89. کاربرد MARL در پیش‌بینی تولید انرژی تجدیدپذیر
• 90. کاربرد MARL در تشخیص خطا در شبکه
• 91. کاربرد MARL در بهینه‌سازی پارامترهای سیستم
• 92. مباحث پیشرفته در MARL: یادگیری مبتنی بر عامل
• 93. مباحث پیشرفته در MARL: یادگیری مبتنی بر بازی
• 94. مباحث پیشرفته در MARL: یادگیری تقویتی از طریق مشاهده
• 95. مباحث پیشرفته در MARL: یادگیری تقویتی با پاداش‌های پیچیده
• 96. مباحث پیشرفته در MARL: یادگیری تقویتی با محدودیت‌ها
• 97. مباحث پیشرفته در MARL: یادگیری تقویتی با اولویت‌ها
• 98. مباحث پیشرفته در MARL: یادگیری تقویتی با استراتژی‌های تطبیقی
• 99. مباحث پیشرفته در MARL: یادگیری تقویتی با تعمیم‌پذیری بالا
• 100. مباحث پیشرفته در MARL: یادگیری تقویتی برای سیستم‌های با ابعاد بالا