دوره ترنسفورمرها: زیربنای هوش مصنوعی مدرن همراه با فلش‌کارت آموزشی — ارائه روی فلش مموری

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره ترنسفورمرها: زیربنای هوش مصنوعی مدرن

موضوع کلی: هوش مصنوعی و مدل‌های زبانی بزرگ

موضوع میانی: شبکه‌های عصبی ترنسفورمر (Transformer Networks)

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر شبکه‌های عصبی و یادگیری عمیق
• 2. مبانی یادگیری ماشین
• 3. معرفی مدل‌های ترنسفورمر
• 4. ساختار اصلی ترنسفورمر: رمزگذار و رمزگشا
• 5. مکانیسم توجه (Attention Mechanism)
• 6. توجه خودی (Self-Attention)
• 7. توجه چندسر (Multi-Head Attention)
• 8. رمزگذاری موقعیت (Positional Encoding)
• 9. لایه‌های نرمال‌سازی (Layer Normalization)
• 10. اتصالات باقی‌مانده (Residual Connections)
• 11. تابع فعال‌سازی (Activation Functions)
• 12. بهینه‌سازی مدل‌های ترنسفورمر
• 13. تابع هزینه (Loss Functions)
• 14. روش‌های تنظیم (Regularization Techniques)
• 15. روش‌های تنظیم نرخ یادگیری (Learning Rate Scheduling)
• 16. تنظیم فراپارامترها (Hyperparameter Tuning)
• 17. آماده‌سازی داده برای ترنسفورمرها
• 18. توکن‌سازی (Tokenization)
• 19. واژگان (Vocabulary) و کدگذاری (Encoding)
• 20. جاسازی کلمات (Word Embeddings)
• 21. بردارسازی متنی (Text Vectorization)
• 22. پردازش زبان طبیعی (NLP) با ترنسفورمرها
• 23. مدل‌های زبانی (Language Models)
• 24. مدل‌های زبانی خودرگرسیو (Autoregressive Language Models)
• 25. مدل‌های زبانی دوطرفه (Bidirectional Language Models)
• 26. مدل‌های ترنسفورمر پیش‌آموزش‌دیده (Pre-trained Transformer Models)
• 27. BERT: مدل رمزگذار دوطرفه
• 28. GPT: مدل رمزگشای خودرگرسیو
• 29. کاربردهای BERT در NLP
• 30. کاربردهای GPT در NLP
• 31. ترنسفورمرهای تخصصی برای پردازش گفتار
• 32. ترنسفورمرها در بینایی ماشین
• 33. شبکه‌های کانولوشنی (CNN) در مقابل ترنسفورمرها
• 34. Vision Transformer (ViT)
• 35. کاربردهای ترنسفورمر در تشخیص تصویر
• 36. ترنسفورمرها در تولید تصویر
• 37. شبکه‌های مولد تخاصمی (GANs) و ترنسفورمرها
• 38. ترنسفورمرها در پردازش ویدئو
• 39. ترنسفورمرها در سیستم‌های توصیه‌گر
• 40. ترنسفورمرها در تحلیل احساسات
• 41. ترنسفورمرها در خلاصه‌سازی متن
• 42. ترنسفورمرها در ترجمه ماشینی
• 43. ترنسفورمرها در پاسخ به سوال
• 44. ترنسفورمرها در تحلیل داده‌های سری زمانی
• 45. ترنسفورمرها در گراف‌های دانش (Knowledge Graphs)
• 46. ترنسفورمرها در یادگیری تقویتی (Reinforcement Learning)
• 47. ترنسفورمرها در رباتیک
• 48. ترنسفورمرها در کشف دارو
• 49. ترنسفورمرها در مدل‌سازی مالی
• 50. ترنسفورمرها در علوم مواد
• 51. ترنسفورمرها در سیستم‌های توزیع‌شده
• 52. ترنسفورمرها در امنیت سایبری
• 53. ترنسفورمرها و الگوریتم‌های بهینه‌سازی
• 54. ترنسفورمرها و یادگیری انتقالی (Transfer Learning)
• 55. ترنسفورمرها و یادگیری چندوظیفه‌ای (Multi-task Learning)
• 56. ترنسفورمرها و یادگیری فدرال (Federated Learning)
• 57. ترنسفورمرها و هوش مصنوعی قابل تفسیر (Interpretable AI)
• 58. محدودیت‌های مدل‌های ترنسفورمر
• 59. چالش‌های محاسباتی ترنسفورمرها
• 60. بهبود کارایی ترنسفورمرها
• 61. مدل‌های سبک‌تر ترنسفورمر
• 62. ترنسفورمرهای کارآمد برای دستگاه‌های لبه
• 63. ترنسفورمرها و مسائل اخلاقی در هوش مصنوعی
• 64. حریم خصوصی در مدل‌های ترنسفورمر
• 65. سوگیری در مدل‌های ترنسفورمر
• 66. تفسیرپذیری و شفافیت در ترنسفورمرها
• 67. آیندهٔ ترنسفورمرها
• 68. ترنسفورمرهای نسل بعدی
• 69. ترکیب ترنسفورمرها با سایر معماری‌ها
• 70. ترنسفورمرها و هوش مصنوعی عمومی (AGI)
• 71. کاربرد ترنسفورمرها در آموزش مجازی
• 72. توسعهٔ سیستم‌های آموزشی هوشمند با ترنسفورمرها
• 73. ارزیابی عملکرد مدل‌های ترنسفورمر
• 74. معیارهای ارزیابی در NLP
• 75. معیارهای ارزیابی در بینایی ماشین
• 76. مجموعه داده‌های استاندارد برای آموزش ترنسفورمرها
• 77. روش‌های ارزیابی در دنیای واقعی
• 78. روش‌های نمونه‌برداری و کاهش ابعاد
• 79. نکات کلیدی در پیاده‌سازی ترنسفورمرها
• 80. ابزارها و کتابخانه‌های رایج (TensorFlow, PyTorch)
• 81. فریم‌ورک‌های متن‌باز برای ترنسفورمرها
• 82. استفاده از GPU و TPU برای آموزش
• 83. مدیریت حافظه در آموزش ترنسفورمرهای بزرگ
• 84. دیباگ کردن مدل‌های ترنسفورمر
• 85. روش‌های پیشرفتهٔ تنظیم مدل
• 86. آموزش ترنسفورمرها از ابتدا (Training from Scratch)
• 87. تنظیم دقیق (Fine-tuning) مدل‌های پیش‌آموزش‌دیده
• 88. آموزش چندوظیفه‌ای با ترنسفورمرها
• 89. یادگیری با داده‌های کم (Few-shot Learning)
• 90. یادگیری بدون نظارت (Unsupervised Learning) با ترنسفورمرها
• 91. یادگیری نیمه‌نظارتی (Semi-supervised Learning)
• 92. تکنیک‌های بهبود معماری ترنسفورمر
• 93. ترنسفورمرهای مبتنی بر گراف
• 94. ترنسفورمرهای مبتنی بر دنباله
• 95. ترنسفورمرهای مبتنی بر درخت
• 96. ترنسفورمرهای مبتنی بر ساختار
• 97. ترنسفورمرهای کارآمد در استفاده از حافظه
• 98. ترنسفورمرهای با پیچیدگی محاسباتی کمتر
• 99. ترنسفورمرهای با قابلیت تفسیر بهتر
• 100. ترنسفورمرها و پردازش زبان فارسی