کتاب صوتی تکنیک‌های پیشرفته یادگیری تقویتی چندعامله برای بهینه‌سازی توزیع حرارتی با پویایی بالا

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره تکنیک‌های پیشرفته یادگیری تقویتی چندعامله برای بهینه‌سازی توزیع حرارتی با پویایی بالا

موضوع کلی: یادگیری تقویتی چندعامله (MARL)

موضوع میانی: یادگیری تقویتی چندعامله برای بهینه‌سازی سیستم‌های مدیریت توزیع انرژی از منابع حرارتی

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر یادگیری تقویتی چندعامله
• 2. مبانی یادگیری تقویتی کلاسیک
• 3. مدل‌های عامل منفرد در یادگیری تقویتی
• 4. تابع ارزش و سیاست در یادگیری تقویتی
• 5. الگوریتم‌های یادگیری تقویتی مبتنی بر مدل
• 6. الگوریتم‌های یادگیری تقویتی بدون مدل
• 7. یادگیری عمیق در یادگیری تقویتی (Deep RL)
• 8. شبکه‌های عصبی کانولوشنال در RL
• 9. شبکه‌های عصبی بازگشتی در RL
• 10. معماری‌های پیشرفته در Deep RL
• 11. مقدمه‌ای بر سیستم‌های چندعامله (MAS)
• 12. تعامل عامل‌ها در سیستم‌های چندعامله
• 13. مدل‌های ریاضی تعامل عامل‌ها
• 14. نظریه بازی‌ها در سیستم‌های چندعامله
• 15. مفاهیم تعادل در نظریه بازی‌ها
• 16. بازی‌های تکراری و هماهنگی
• 17. یادگیری تقویتی چندعامله (MARL)
• 18. چالش‌های اساسی در MARL
• 19. عدم ایستایی محیط در MARL
• 20. مشاهده‌پذیری محدود در MARL
• 21. مقیاس‌پذیری در MARL
• 22. ناهمگونی عامل‌ها در MARL
• 23. رویکردهای مبتنی بر عامل منفرد در MARL
• 24. یادگیری سیاست مشترک در MARL
• 25. یادگیری تابع ارزش مشترک در MARL
• 26. یادگیری سیاست‌های مستقل در MARL
• 27. مزایا و معایب یادگیری سیاست مستقل
• 28. رویکردهای مبتنی بر عامل مرکزی در MARL
• 29. یادگیری متمرکز-غیرمتمرکز (CTDE)
• 30. معماری‌های CTDE
• 31. شبکه‌های عامل مرکزی (Centralized Critic Networks)
• 32. شبکه‌های عامل مجزا (Decentralized Actor Networks)
• 33. الگوریتم‌های پیشرفته CTDE
• 34. MADDPG (Multi-Agent Deep Deterministic Policy Gradient)
• 35. QMIX (Quantized Value Function Representation)
• 36. VDN (Value Decomposition Networks)
• 37. COMA (Counterfactual Multi-Agent Policy Gradients)
• 38. رویکردهای مبتنی بر مدل در MARL
• 39. یادگیری مدل مشترک در MARL
• 40. استفاده از مدل برای برنامه‌ریزی در MARL
• 41. روش‌های جستجوی درخت در MARL
• 42. روش‌های مبتنی بر شبیه‌سازی در MARL
• 43. مقدمه‌ای بر بهینه‌سازی توزیع حرارتی
• 44. مفاهیم پایه انتقال حرارت
• 45. انواع انتقال حرارت (رسانش، همرفت، تشعشع)
• 46. معادلات حاکم بر انتقال حرارت
• 47. مدل‌سازی توزیع حرارتی
• 48. کاربردها در سیستم‌های صنعتی
• 49. سیستم‌های قدرت و توزیع حرارتی
• 50. شبکه‌های حرارتی شهری
• 51. فرآیندهای صنعتی با نیاز به کنترل حرارتی
• 52. مقدمه‌ای بر پویایی بالا در سیستم‌های حرارتی
• 53. تغییرات سریع در بار حرارتی
• 54. اثرات اغتشاشات ناگهانی
• 55. نیاز به پاسخ سریع و بهینه
• 56. چالش‌های کنترل در سیستم‌های با پویایی بالا
• 57. نقش یادگیری تقویتی در پویایی بالا
• 58. مدل‌سازی دینامیکی سیستم‌های حرارتی
• 59. استخراج دینامیک از داده‌های واقعی
• 60. روش‌های شناسایی سیستم
• 61. پیاده‌سازی عامل‌های یادگیری تقویتی برای کنترل حرارتی
• 62. انتخاب فضای حالت و عمل مناسب
• 63. طراحی تابع پاداش برای بهینه‌سازی حرارتی
• 64. مدیریت مصرف انرژی
• 65. حفظ دمای مطلوب
• 66. جلوگیری از اتلاف حرارتی
• 67. بهینه‌سازی راندمان سیستم
• 68. بهینه‌سازی توزیع حرارتی با MARL
• 69. مدل‌سازی توزیع حرارتی به عنوان یک مسئله چندعامله
• 70. عامل‌ها به عنوان واحدهای کنترلی در شبکه حرارتی
• 71. تعامل عامل‌ها برای هماهنگی توزیع
• 72. استفاده از CTDE برای کنترل توزیع حرارتی
• 73. پیاده‌سازی QMIX برای هماهنگی عامل‌ها
• 74. پیاده‌سازی MADDPG برای کنترل دینامیک
• 75. ارزیابی عملکرد سیستم با معیارهای کلیدی
• 76. شاخص‌های راندمان انرژی
• 77. دقت کنترل دما
• 78. پایداری سیستم
• 79. سرعت پاسخ به تغییرات
• 80. مطالعات موردی در بهینه‌سازی توزیع حرارتی
• 81. کاربرد در شبکه‌های حرارتی شهری
• 82. کاربرد در سیستم‌های خنک‌کننده صنعتی
• 83. کاربرد در مدیریت حرارتی مراکز داده
• 84. روش‌های ارزیابی و اعتبارسنجی مدل‌ها
• 85. شبیه‌سازی سیستم‌های حرارتی چندعامله
• 86. آزمایش‌های عملی در مقیاس کوچک
• 87. تجزیه و تحلیل حساسیت پارامترها
• 88. مباحث پیشرفته در MARL برای سیستم‌های حرارتی
• 89. یادگیری انتقال (Transfer Learning) در MARL
• 90. یادگیری federated در MARL برای سیستم‌های حرارتی
• 91. کاربرد شبکه‌های عصبی گراف (GNN) در MARL
• 92. تفسیرپذیری در سیستم‌های MARL حرارتی
• 93. ملاحظات ایمنی و اطمینان‌پذیری در سیستم‌های کنترلی
• 94. اصول مهندسی ایمنی در سیستم‌های حرارتی
• 95. تضمین عملکرد صحیح در شرایط بحرانی
• 96. استانداردهای فنی در سیستم‌های توزیع حرارتی
• 97. اخلاق حرفه‌ای در مهندسی سیستم‌های انرژی
• 98. ملاحظات زیست‌محیطی و پایداری در سیستم‌های حرارتی
• 99. کاهش انتشار گازهای گلخانه‌ای
• 100. بهینه‌سازی مصرف منابع