فلش‌کارت‌های آموزشی طراحی و پیاده‌سازی سیستم‌های حمل و نقل هوشمند مبتنی بر MARL منطقه‌ای

📚 کتاب آموزشی جامع

📚 اطلاعات کتاب

عنوان کتاب: کتاب طراحی و پیاده‌سازی سیستم‌های حمل و نقل هوشمند مبتنی بر MARL منطقه‌ای

موضوع کلی: یادگیری تقویتی چندعامله (MARL)

موضوع میانی: یادگیری تقویتی چندعامله برای بهینه‌سازی سیستم‌های مدیریت حمل و نقل هوشمند در مقیاس منطقه‌ای

📋 سرفصل‌های کتاب (100 موضوع)

• 1. مقدمات و مبانی هوش مصنوعی و یادگیری ماشین
• 2. مقدمات یادگیری تقویتی
• 3. مبانی یادگیری تقویتی چند عامله (MARL)
• 4. مرور و تاریخچه MARL
• 5. کاربرد MARL در سیستم‌های هوشمند
• 6. مبانی سیستم‌های حمل و نقل هوشمند (ITS)
• 7. معماری‌های سیستم‌های حمل و نقل هوشمند
• 8. اجزای اصلی ITS
• 9. سنسورها و جمع‌آوری داده در ITS
• 10. شبکه‌های ارتباطی در ITS (V2V, V2I, V2X)
• 11. مفاهیم پایه ترافیک و جریان
• 12. مدل‌سازی جریان ترافیک
• 13. تحلیل داده‌های ترافیک
• 14. کاربرد هوش مصنوعی در بهینه‌سازی ترافیک
• 15. یادگیری ماشین در پیش‌بینی ترافیک
• 16. یادگیری عمیق در تحلیل ترافیک
• 17. شبکه‌های عصبی کانولوشنال (CNN) برای تحلیل تصویر ترافیک
• 18. شبکه‌های عصبی بازگشتی (RNN) برای تحلیل سری زمانی ترافیک
• 19. شبکه‌های عصبی ترنسفورمر برای تحلیل ترافیک
• 20. مبانی یادگیری تقویتی
• 21. مفهوم عامل، محیط، وضعیت، عمل، پاداش
• 22. انواع یادگیری تقویتی (مدل‌بخش، مدل‌ناپذیر)
• 23. الگوریتم‌های یادگیری تقویتی کلاسیک (Q-Learning, SARSA)
• 24. یادگیری تقویتی عمیق (Deep Reinforcement Learning - DRL)
• 25. معرفی DRL
• 26. شبکه‌های عصبی عمیق در DRL
• 27. الگوریتم‌های DRL (DQN, DDQN, DDPG, A2C, PPO)
• 28. یادگیری تقویتی چند عامله (Multi-Agent Reinforcement Learning - MARL)
• 29. مفاهیم پایه MARL
• 30. مشکلات و چالش‌های MARL (ناپایداری، عدم قطعیت، ارتباطات)
• 31. دسته‌بندی روش‌های MARL
• 32. روش‌های مبتنی بر عامل مرکزی (Centralized Training, Decentralized Execution - CTDE)
• 33. روش‌های مبتنی بر عامل مستقل (Independent Learners)
• 34. روش‌های مبتنی بر همکاری (Cooperative MARL)
• 35. روش‌های مبتنی بر رقابت (Competitive MARL)
• 36. روش‌های مبتنی بر ترکیبی (Mixed MARL)
• 37. روش‌های مبتنی بر بازی (Game Theory) در MARL
• 38. مفاهیم بازی‌های پویا
• 39. تعادل نش (Nash Equilibrium)
• 40. کاربرد نظریه بازی در MARL
• 41. پیاده‌سازی MARL برای سیستم‌های حمل و نقل
• 42. طراحی محیط شبیه‌سازی برای ITS مبتنی بر MARL
• 43. شبیه‌سازهای ترافیک (SUMO, MATSim, VISSIM)
• 44. تنظیم پارامترهای شبیه‌ساز
• 45. تعریف عوامل در محیط MARL ITS
• 46. تعریف وضعیت (State) برای عوامل در ITS
• 47. تعریف عمل (Action) برای عوامل در ITS
• 48. طراحی تابع پاداش (Reward Function) در ITS
• 49. پاداش‌های مرتبط با کاهش تاخیر
• 50. پاداش‌های مرتبط با افزایش جریان
• 51. پاداش‌های مرتبط با کاهش مصرف سوخت
• 52. پاداش‌های مرتبط با کاهش آلودگی
• 53. پاداش‌های مرتبط با ایمنی
• 54. طراحی توابع پاداش ترکیبی
• 55. انتخاب الگوریتم MARL مناسب برای ITS
• 56. پیاده‌سازی الگوریتم‌های CTDE در ITS
• 57. پیاده‌سازی الگوریتم‌های Independent Learners در ITS
• 58. پیاده‌سازی الگوریتم‌های Cooperative MARL در ITS
• 59. پیاده‌سازی الگوریتم‌های Competitive MARL در ITS
• 60. پیاده‌سازی الگوریتم‌های Mixed MARL در ITS
• 61. آموزش عوامل MARL در محیط شبیه‌سازی ITS
• 62. ارزیابی عملکرد سیستم‌های MARL ITS
• 63. معیارهای ارزیابی (میانگین تاخیر، میانگین سرعت، ظرفیت، مصرف سوخت)
• 64. مقایسه عملکرد با روش‌های سنتی
• 65. مقایسه عملکرد با روش‌های DRL تک عامله
• 66. تحلیل حساسیت به پارامترها
• 67. کاربرد MARL در کنترل ترافیک چراغ‌های راهنمایی
• 68. بهینه‌سازی زمان‌بندی چراغ‌های راهنمایی با MARL
• 69. کنترل توزیع شده چراغ‌های راهنمایی
• 70. بهینه‌سازی جریان در تقاطع‌های پیچیده
• 71. کاربرد MARL در مدیریت پارکینگ
• 72. تخصیص فضای پارکینگ با MARL
• 73. هدایت خودروها به سمت پارکینگ‌های خالی
• 74. کاربرد MARL در سیستم‌های حمل و نقل اشتراکی (Ride-Sharing)
• 75. تطبیق مسافر و راننده با MARL
• 76. بهینه‌سازی مسیرهای رانندگان
• 77. کاربرد MARL در هدایت خودکار خودروها
• 78. کنترل هماهنگ خودروهای خودران
• 79. تشکیل کاروان خودرویی (Platooning)
• 80. کاربرد MARL در مدیریت ناوگان حمل و نقل
• 81. بهینه‌سازی مسیر ناوگان
• 82. مدیریت زمان‌بندی و بارگیری
• 83. کاربرد MARL در سیستم‌های حمل و نقل عمومی
• 84. بهینه‌سازی زمان‌بندی اتوبوس‌ها و قطارها
• 85. مدیریت تقاضا
• 86. چالش‌های پیاده‌سازی MARL در دنیای واقعی
• 87. جمع‌آوری داده‌های واقعی و برچسب‌گذاری
• 88. اعتمادپذیری و قابلیت اطمینان سیستم‌های MARL
• 89. امنیت در سیستم‌های MARL ITS
• 90. ملاحظات اخلاقی و اجتماعی
• 91. قابلیت تفسیر (Explainability) در MARL ITS
• 92. مقیاس‌پذیری سیستم‌های MARL
• 93. انتقال دانش (Transfer Learning) در MARL ITS
• 94. یادگیری روی خط (Online Learning) در MARL ITS
• 95. یادگیری فعال (Active Learning) در MARL ITS
• 96. ارتباطات بین عوامل در MARL ITS
• 97. مدل‌سازی ارتباطات صریح
• 98. مدل‌سازی ارتباطات ضمنی
• 99. یادگیری پروتکل‌های ارتباطی
• 100. شبکه‌های عصبی مولد (Generative Adversarial Networks - GANs) در MARL ITS