کتاب صوتی شبکه‌های کیو عمیق: بهینه‌سازی عملکرد عامل‌ها در محیط‌های تیمی

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره شبکه‌های کیو عمیق: بهینه‌سازی عملکرد عامل‌ها در محیط‌های تیمی

موضوع کلی: یادگیری تقویتی چندعامله (MARL)

موضوع میانی: Deep Q-Networks (DQN)

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر یادگیری تقویتی عمیق
• 2. مفاهیم اساسی یادگیری تقویتی
• 3. عوامل و محیط‌ها در یادگیری تقویتی
• 4. تابع پاداش و فرایند یادگیری
• 5. مدل‌های یادگیری تقویتی: مارکوف
• 6. فرآیندهای تصمیم‌گیری مارکوف (MDP)
• 7. حساب احتمال و امید ریاضی
• 8. حساب احتمالات شرطی
• 9. نامعادله چبیشف و قضایای مرتبط
• 10. مفهوم سیاست در یادگیری تقویتی
• 11. ارزش تابع و سیاست بهینه
• 12. روش‌های مبتنی بر ارزش
• 13. الگوریتم‌های ارزش‌گذاری مونت کارلو
• 14. الگوریتم‌های Q-learning
• 15. الگوریتم‌های SARSA
• 16. روش‌های مبتنی بر سیاست
• 17. گرادیان سیاست
• 18. الگوریتم REINFORCE
• 19. شبکه‌های عصبی عمیق برای یادگیری تقویتی
• 20. عناصر شبکه‌های عصبی
• 21. توابع فعال‌سازی
• 22. پس‌انتشار خطا
• 23. معماری‌های شبکه‌های عصبی کانولوشنی (CNN)
• 24. معماری‌های شبکه‌های عصبی بازگشتی (RNN)
• 25. شبکه‌های عصبی ترنسفورمر
• 26. یادگیری تقویتی عمیق (DQN)
• 27. تابع ارزش عمیق
• 28. تجربه تکرار (Experience Replay)
• 29. هدف‌گذاری ثابت (Fixed Q-Targets)
• 30. مزایای DQN
• 31. انواع DQN: Double DQN
• 32. انواع DQN: Dueling DQN
• 33. انواع DQN: Prioritized Experience Replay
• 34. یادگیری تقویتی عمیق در محیط‌های پیوسته
• 35. الگوریتم‌های Actor-Critic
• 36. الگوریتم A2C (Advantage Actor-Critic)
• 37. الگوریتم A3C (Asynchronous Advantage Actor-Critic)
• 38. الگوریتم DDPG (Deep Deterministic Policy Gradient)
• 39. الگوریتم TD3 (Twin Delayed Deep Deterministic Policy Gradient)
• 40. الگوریتم SAC (Soft Actor-Critic)
• 41. یادگیری تقویتی در محیط‌های تیمی
• 42. مفاهیم یادگیری تقویتی چندعامله (MARL)
• 43. رویکردهای مرکزی در MARL
• 44. رویکردهای غیرمتمرکز در MARL
• 45. رویکردهای مختلط در MARL
• 46. بازی‌های جمعی و رقابتی
• 47. تعادل در بازی‌های تیمی
• 48. یادگیری همکاری در تیم‌ها
• 49. مدل‌سازی رفتار هم‌تیمی‌ها
• 50. مدل‌سازی رفتار رقبا
• 51. استراتژی‌های تیمی تطبیقی
• 52. یادگیری تقویتی برای هماهنگی تیمی
• 53. بهینه‌سازی ارتباطات در تیم‌ها
• 54. مدیریت منابع در تیم‌های هوشمند
• 55. یادگیری تقویتی برای تصمیم‌گیری مشترک
• 56. کاربردها در رباتیک تیمی
• 57. کاربردها در بازی‌های کامپیوتری
• 58. کاربردها در سیستم‌های توصیه‌گر تیمی
• 59. کاربردها در مدیریت ترافیک
• 60. کاربردها در شبکه‌های ارتباطی
• 61. کاربردها در سیستم‌های خودران تیمی
• 62. کاربردها در بهینه‌سازی زنجیره تأمین
• 63. کاربردها در شبیه‌سازی‌های اقتصادی
• 64. مفاهیم پیشرفته در MARL
• 65. یادگیری تقویتی برای عامل‌های با حافظه
• 66. یادگیری تقویتی برای عامل‌های با توانایی مشاهده محدود
• 67. یادگیری تقویتی برای عامل‌های با اهداف بلندمدت
• 68. یادگیری تقویتی برای عامل‌های با قابلیت اکتشاف
• 69. یادگیری تقویتی برای عامل‌های با قابلیت انتقال دانش
• 70. یادگیری تقویتی برای عامل‌های با قابلیت یادگیری از ناظر
• 71. یادگیری تقویتی برای عامل‌های با قابلیت توضیح‌پذیری
• 72. چالش‌های پیاده‌سازی MARL
• 73. ارزیابی عملکرد در محیط‌های تیمی
• 74. معیارهای موفقیت در تیم‌های هوشمند
• 75. شبیه‌سازی محیط‌های تیمی پیچیده
• 76. ابزارهای شبیه‌سازی برای MARL
• 77. تنظیم پارامترها در الگوریتم‌های MARL
• 78. تکنیک‌های مقابله با ناپایداری در MARL
• 79. یادگیری تقویتی برای تیم‌های ناهمگن
• 80. یادگیری تقویتی برای تیم‌های پویا (تغییر تعداد اعضا)
• 81. یادگیری تقویتی برای تیم‌های با ارتباطات نامطمئن
• 82. یادگیری تقویتی برای تیم‌های با پاداش پراکنده
• 83. مباحث اخلاقی در یادگیری تقویتی تیمی
• 84. مسئولیت‌پذیری عامل‌های تیمی
• 85. شفافیت در تصمیم‌گیری‌های تیمی
• 86. کاربردها در بهینه‌سازی سیستم‌های انرژی
• 87. کاربردها در مدیریت فجایع
• 88. کاربردها در آموزش مجازی تیمی
• 89. کاربردها در پژوهش‌های علمی تیمی
• 90. کاربردها در بهینه‌سازی عملیات نظامی (با رعایت چارچوب‌های قانونی)
• 91. کاربردها در مدیریت شهری هوشمند
• 92. کاربردها در بهینه‌سازی فرآیندهای صنعتی
• 93. کاربردها در توسعه بازی‌های استراتژیک
• 94. کاربردها در سیستم‌های پزشکی مشارکتی
• 95. کاربردها در بهینه‌سازی منابع در کشاورزی هوشمند
• 96. کاربردها در مدیریت ناوگان حمل و نقل هوشمند
• 97. کاربردها در سیستم‌های هوشمند خانه و ساختمان