فلش‌کارت‌های آموزشی طراحی و پیاده‌سازی سیستم‌های تحلیل دادهٔ جریانی مقاوم در محیط ابری (با تأکید بر خدمات ابری داخلی یا عمومی منطبق)

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره طراحی و پیاده‌سازی سیستم‌های تحلیل دادهٔ جریانی مقاوم در محیط ابری (با تأکید بر خدمات ابری داخلی یا عمومی منطبق)

موضوع کلی: فناوری اطلاعات و مهندسی نرم‌افزار

موضوع میانی: سیستم‌های داده و پردازش بلادرنگ

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر تحلیل داده‌های جریانی
• 2. مبانی پردازش بلادرنگ
• 3. معماری سیستم‌های تحلیل دادهٔ جریانی
• 4. مقاومت در سیستم‌های دادهٔ جریانی
• 5. مفاهیم کلیدی پردازش رویداد
• 6. مدیریت وضعیت در پردازش جریانی
• 7. الگوهای طراحی برای سیستم‌های جریانی
• 8. انواع پردازش جریانی (میکرو-بچ، رویداد به رویداد)
• 9. اهمیت پردازش بلادرنگ در کسب‌وکار
• 10. چالش‌های طراحی سیستم‌های جریانی
• 11. ابزارهای پردازش جریانی (معرفی)
• 12. آشنایی با مفاهیم ابری برای سیستم‌های جریانی
• 13. خدمات ابری برای پردازش داده‌های جریانی (معرفی)
• 14. معماری‌های رایج سیستم‌های تحلیل دادهٔ جریانی
• 15. پردازش رویدادهای توزیع‌شده
• 16. مدیریت داده‌های ورودی جریانی
• 17. پردازش و تبدیل داده‌های جریانی
• 18. ذخیره‌سازی داده‌های جریانی
• 19. تحلیل داده‌های جریانی
• 20. تجسم داده‌های جریانی
• 21. مانیتورینگ و گزارش‌دهی سیستم‌های جریانی
• 22. مقاومت در برابر خطا در پردازش جریانی
• 23. مدیریت از کار افتادگی در سیستم‌های جریانی
• 24. بازیابی از خطا در سیستم‌های جریانی
• 25. تست سیستم‌های تحلیل دادهٔ جریانی
• 26. بهینه‌سازی عملکرد سیستم‌های جریانی
• 27. امنیت در سیستم‌های تحلیل دادهٔ جریانی
• 28. ملاحظات حریم خصوصی در پردازش جریانی
• 29. مدیریت هزینه‌ها در سیستم‌های جریانی ابری
• 30. اتوماسیون در سیستم‌های جریانی
• 31. مقدمه‌ای بر مفاهیم داده‌های بزرگ
• 32. معماری‌های پردازش داده‌های بزرگ
• 33. ابزارهای اکوسیستم داده‌های بزرگ
• 34. مفاهیم پردازش دسته‌ای (Batch Processing)
• 35. مقایسه پردازش دسته‌ای و جریانی
• 36. مفاهیم پردازش میکرو-دسته‌ای (Micro-batch Processing)
• 37. معماری‌های پردازش میکرو-دسته‌ای
• 38. کاربرد پردازش میکرو-دسته‌ای
• 39. مفاهیم پردازش رویداد محور (Event-driven Processing)
• 40. الگوهای معماری رویداد محور
• 41. پیاده‌سازی سیستم‌های رویداد محور
• 42. مفاهیم صف پیام (Message Queue)
• 43. انواع صف‌های پیام
• 44. کاربرد صف‌های پیام در سیستم‌های جریانی
• 45. مفاهیم جریان داده (Data Stream)
• 46. مدل‌های جریان داده
• 47. مدیریت جریان‌های داده
• 48. مفاهیم پنجره‌بندی (Windowing) در پردازش جریانی
• 49. انواع پنجره‌ها (تجمعی، لغزشی، جلسه‌ای)
• 50. پیاده‌سازی پنجره‌بندی
• 51. مفاهیم ادغام رویداد (Event Joining)
• 52. تکنیک‌های ادغام رویداد
• 53. چالش‌های ادغام رویداد
• 54. مفاهیم تحلیل وضعیت (Stateful Analysis)
• 55. مدیریت وضعیت در پردازش جریانی
• 56. ذخیره‌سازی وضعیت
• 57. مفاهیم پردازش تراکنشی (Transactional Processing)
• 58. تراکنش‌ها در سیستم‌های جریانی
• 59. ضمانت‌های پردازش جریانی (Exactly-once, At-least-once)
• 60. مدیریت خطا در پردازش جریانی
• 61. استراتژی‌های تحمل خطا
• 62. مقاومت در برابر از دست رفتن داده
• 63. بازیابی از خرابی سیستم
• 64. مفاهیم پردازش توزیع‌شده
• 65. هماهنگی در سیستم‌های توزیع‌شده
• 66. مکانیزم‌های اجماع در سیستم‌های توزیع‌شده
• 67. مفاهیم مقیاس‌پذیری (Scalability)
• 68. مقیاس‌پذیری عمودی و افقی
• 69. طراحی برای مقیاس‌پذیری
• 70. مفاهیم تحمل‌پذیری در برابر خطا (Fault Tolerance)
• 71. الگوهای طراحی برای تحمل‌پذیری در خطا
• 72. پیاده‌سازی تحمل‌پذیری در خطا
• 73. مفاهیم پردازش توزیع‌شده مقاوم
• 74. معماری‌های پردازش توزیع‌شده مقاوم
• 75. چالش‌های پردازش توزیع‌شده مقاوم
• 76. مقدمه‌ای بر خدمات ابری برای پردازش جریانی
• 77. خدمات ابری برای صف پیام
• 78. خدمات ابری برای پردازش جریانی
• 79. خدمات ابری برای ذخیره‌سازی داده‌های جریانی
• 80. خدمات ابری برای تحلیل داده‌های جریانی
• 81. امنیت در خدمات ابری پردازش جریانی
• 82. مدیریت هویت و دسترسی در محیط ابری
• 83. انطباق با مقررات در سیستم‌های ابری
• 84. اصول طراحی سیستم‌های تحلیل دادهٔ جریانی مقاوم
• 85. انتخاب ابزارها و فناوری‌های مناسب
• 86. ارزیابی و انتخاب خدمات ابری
• 87. طراحی معماری مقاوم و مقیاس‌پذیر
• 88. پیاده‌سازی مکانیزم‌های تحمل خطا
• 89. تست و اعتبارسنجی سیستم
• 90. مانیتورینگ و بهینه‌سازی مداوم
• 91. مفاهیم پایگاه داده‌های جریانی
• 92. کاربرد پایگاه داده‌های جریانی
• 93. مقایسه پایگاه داده‌های جریانی با پایگاه داده‌های سنتی
• 94. مفاهیم داده‌های هم‌زمان (Real-time Data)
• 95. اهمیت داده‌های هم‌زمان
• 96. پردازش و تحلیل داده‌های هم‌زمان
• 97. مفاهیم یادگیری ماشین در پردازش جریانی
• 98. آموزش مدل‌های یادگیری ماشین بر روی داده‌های جریانی
• 99. استفاده از مدل‌های یادگیری ماشین در تحلیل جریانی
• 100. مفاهیم هوش مصنوعی در سیستم‌های جریانی