دوره سفارشی‌سازی عمیق مدل‌های Hugging Face همراه با فلش‌کارت آموزشی — ارائه روی فلش مموری

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره سفارشی‌سازی عمیق مدل‌های Hugging Face

موضوع کلی: هوش مصنوعی و مدل‌های زبانی بزرگ

موضوع میانی: Hugging Face Ecosystem

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر مدل‌های زبان بزرگ و Hugging Face
• 2. نصب و راه‌اندازی محیط توسعه Hugging Face
• 3. آشنایی با کتابخانه Transformers
• 4. مفاهیم اصلی مدل‌های ترنسفورمر
• 5. معماری ترنسفورمر: انکودر و دیکودر
• 6. مکانیزم توجه (Attention Mechanism)
• 7. توکن‌سازی (Tokenization) و انواع آن
• 8. مقدمه‌ای بر مدل‌های از پیش آموزش‌دیده
• 9. کاربرد مدل‌های از پیش آموزش‌دیده
• 10. تنظیم دقیق (Fine-tuning) مدل‌ها
• 11. فرآیند آموزش مدل‌های زبانی
• 12. مجموعه‌داده‌های متنی و پیش‌پردازش آن‌ها
• 13. انتخاب مجموعه داده مناسب برای تنظیم دقیق
• 14. تنظیم دقیق مدل برای طبقه‌بندی متن
• 15. تنظیم دقیق مدل برای تشخیص موجودیت نام‌گذاری شده (NER)
• 16. تنظیم دقیق مدل برای خلاصه‌سازی متن
• 17. تنظیم دقیق مدل برای پاسخ به سوالات
• 18. تنظیم دقیق مدل برای ترجمه ماشینی
• 19. مفهوم Embedding و کاربردهای آن
• 20. یادگیری Embedding از داده‌ها
• 21. مدل‌های Embedding مبتنی بر ترنسفورمر
• 22. مدل‌های Embeddings سفارشی
• 23. معرفی مدل‌های توالی به توالی (Sequence-to-Sequence)
• 24. کاربرد مدل‌های توالی به توالی در پردازش زبان طبیعی
• 25. تنظیم دقیق مدل‌های توالی به توالی
• 26. مدل‌های مولد (Generative Models)
• 27. معرفی مدل‌های زبانی مولد
• 28. تنظیم دقیق مدل‌های مولد
• 29. تولید متن خلاقانه با مدل‌های زبانی
• 30. تولید کد با مدل‌های زبانی
• 31. مدیریت خطا در مدل‌های زبانی
• 32. ارزیابی عملکرد مدل‌های زبانی
• 33. معیارهای ارزیابی مدل‌های طبقه‌بندی متن
• 34. معیارهای ارزیابی مدل‌های NER
• 35. معیارهای ارزیابی مدل‌های خلاصه‌سازی
• 36. معیارهای ارزیابی مدل‌های ترجمه
• 37. مقدمه‌ای بر مدل‌های چندزبانه
• 38. تنظیم دقیق مدل‌های چندزبانه
• 39. کاربرد مدل‌های چندزبانه در ترجمه
• 40. مدل‌های زبانی برای زبان فارسی
• 41. آماده‌سازی داده‌های فارسی برای آموزش
• 42. تنظیم دقیق مدل‌های زبان فارسی
• 43. چالش‌های پردازش زبان فارسی
• 44. مدل‌های زبانی برای حوزه‌های تخصصی
• 45. تنظیم دقیق مدل برای حوزه پزشکی
• 46. تنظیم دقیق مدل برای حوزه حقوقی
• 47. تنظیم دقیق مدل برای حوزه مالی
• 48. تنظیم دقیق مدل برای حوزه ادبیات
• 49. معرفی تکنیک‌های پیشرفته تنظیم دقیق
• 50. تنظیم دقیق با استفاده از LoRA
• 51. تنظیم دقیق با استفاده از QLoRA
• 52. تنظیم دقیق با استفاده از Adapters
• 53. تنظیم دقیق با استفاده از Prompt Tuning
• 54. تنظیم دقیق با استفاده از Prefix Tuning
• 55. روش‌های بهینه‌سازی فرآیند تنظیم دقیق
• 56. استفاده از GPU و TPU برای آموزش
• 57. تکنیک‌های کاهش حافظه مورد نیاز
• 58. Parallelism در آموزش مدل‌های بزرگ
• 59. Data Parallelism
• 60. Model Parallelism
• 61. Pipeline Parallelism
• 62. Zero Redundancy Optimizer (ZeRO)
• 63. استفاده از ابزارهای نظارتی (Monitoring Tools)
• 64. TensorBoard برای نظارت بر آموزش
• 65. Weights & Biases برای نظارت بر آموزش
• 66. مدیریت نسخه‌های مدل (Model Versioning)
• 67. ذخیره‌سازی و بارگذاری مدل‌ها
• 68. اشتراک‌گذاری مدل‌ها در Hugging Face Hub
• 69. مقدمه‌ای بر مدل‌های Encoder-Only
• 70. کاربرد مدل‌های Encoder-Only
• 71. مدل‌های Decoder-Only و کاربردهای آن‌ها
• 72. مدل‌های Encoder-Decoder و کاربردهای آن‌ها
• 73. معرفی مدل‌های پیشرفته‌تر
• 74. GPT-3 و خانواده آن
• 75. BERT و خانواده آن
• 76. RoBERTa و خانواده آن
• 77. XLNet و خانواده آن
• 78. T5 و خانواده آن
• 79. BART و خانواده آن
• 80. LLaMA و خانواده آن
• 81. Mistral AI مدل‌ها
• 82. Gemini مدل‌ها
• 83. فناوری‌های مرتبط با مدل‌های زبانی
• 84. یادگیری انتقالی (Transfer Learning)
• 85. یادگیری تقویتی (Reinforcement Learning) در NLP
• 86. معرفی ابزارهای ارزیابی و تحلیل مدل
• 87. تکنیک‌های توضیح‌پذیری مدل (Explainability)
• 88. ملاحظات اخلاقی در استفاده از مدل‌های زبانی
• 89. امنیت مدل‌های زبانی
• 90. حریم خصوصی در پردازش زبان طبیعی
• 91. کاربرد مدل‌های زبانی در ساخت چت‌بات‌های سازگار با قوانین
• 92. توسعه چت‌بات‌های آموزشی با رویکرد اسلامی
• 93. طراحی سیستم‌های پرسش و پاسخ شرعی
• 94. تولید محتوای آموزشی اخلاقی
• 95. انطباق مدل‌های زبانی با مقررات بانک مرکزی در حوزه مالی
• 96. استفاده از مدل‌های زبانی در تحلیل داده‌های اقتصادی اسلامی
• 97. کاربرد مدل‌های زبانی در حوزه سلامت با رعایت پروتکل‌های وزارت بهداشت
• 98. مدل‌های زبانی برای تحلیل متون تاریخی و فرهنگی ایران
• 99. تولید محتوای آموزشی در حوزه تاریخ با رویکرد ملی
• 100. ملاحظات قانونی در استفاده از مدل‌های زبانی در ایران