فلش‌کارت‌های آموزشی نصب، پیکربندی و مدیریت Hadoop در محیط عملیاتی

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره نصب، پیکربندی و مدیریت Hadoop در محیط عملیاتی

موضوع کلی: علوم داده و یادگیری ماشین

موضوع میانی: Hadoop

📋 سرفصل‌های دوره

• 1. مبانی و معماری Hadoop
• 2. نصب و پیکربندی Hadoop
• 3. مدیریت Cluster Hadoop
• 4. فایل سیستم توزیع شده Hadoop (HDFS)
• 5. مفاهیم کلیدی HDFS
• 6. عملیات پایه HDFS
• 7. مدیریت فضای ذخیره‌سازی HDFS
• 8. پیکربندی HDFS
• 9. مانیتورینگ و نگهداری HDFS
• 10. MapReduce: چارچوب پردازش موازی
• 11. مبانی MapReduce
• 12. نوشتن Job های MapReduce
• 13. اجرای Job های MapReduce
• 14. تنظیمات پیشرفته MapReduce
• 15. اشکال‌زدایی MapReduce
• 16. YARN: مدیریت منابع در Hadoop
• 17. معماری YARN
• 18. مدیریت Job ها در YARN
• 19. تنظیمات YARN
• 20. مانیتورینگ YARN
• 21. ذخیره‌سازی و پردازش داده‌ها با Hive
• 22. مبانی HiveQL
• 23. نصب و پیکربندی Hive
• 24. طراحی Schema در Hive
• 25. بهینه‌سازی Query های Hive
• 26. مدیریت داده‌های بزرگ با Pig
• 27. مبانی Pig Latin
• 28. نوشتن Script های Pig
• 29. اجرای Script های Pig
• 30. بهینه‌سازی Script های Pig
• 31. پایگاه داده NoSQL: HBase
• 32. مبانی HBase
• 33. نصب و پیکربندی HBase
• 34. طراحی Schema در HBase
• 35. عملیات پایه HBase
• 36. مدیریت داده‌ها در HBase
• 37. پردازش جریان داده با Spark
• 38. مبانی Spark
• 39. نصب و پیکربندی Spark
• 40. Spark Core
• 41. Spark SQL
• 42. Spark Streaming
• 43. امنیت در Hadoop
• 44. مبانی امنیت Hadoop
• 45. پیکربندی Kerberos
• 46. مدیریت دسترسی با Sentry
• 47. رمزنگاری داده‌ها در Hadoop
• 48. مانیتورینگ و گزارش‌گیری امنیتی
• 49. بهینه‌سازی عملکرد Cluster Hadoop
• 50. تنظیمات سیستم عامل برای Hadoop
• 51. تنظیمات Java Virtual Machine (JVM)
• 52. تنظیمات Hadoop Daemons
• 53. مانیتورینگ عملکرد Cluster
• 54. شناسایی bottleneck ها
• 55. مدیریت Cluster در مقیاس بزرگ
• 56. استراتژی‌های استقرار Cluster
• 57. مدیریت ارتقاء Cluster
• 58. مدیریت خرابی و بازیابی
• 59. اتوماسیون وظایف مدیریتی
• 60. ابزارهای مدیریت Cluster
• 61. Zookeeper برای هماهنگ‌سازی
• 62. مبانی Zookeeper
• 63. نصب و پیکربندی Zookeeper
• 64. استفاده از Zookeeper در Hadoop
• 65. مدیریت Cluster با Ambari
• 66. نصب و پیکربندی Ambari
• 67. مدیریت سرویس‌ها با Ambari
• 68. مانیتورینگ با Ambari
• 69. عیب‌یابی با Ambari
• 70. مدیریت Cluster با Cloudera Manager
• 71. نصب و پیکربندی Cloudera Manager
• 72. مدیریت سرویس‌ها با Cloudera Manager
• 73. مانیتورینگ با Cloudera Manager
• 74. عیب‌یابی با Cloudera Manager
• 75. ذخیره‌سازی و پردازش داده‌های JSON
• 76. مبانی پردازش JSON در Hadoop
• 77. استفاده از Hive برای JSON
• 78. استفاده از Spark برای JSON
• 79. ذخیره‌سازی و پردازش داده‌های CSV
• 80. مبانی پردازش CSV در Hadoop
• 81. استفاده از Hive برای CSV
• 82. استفاده از Spark برای CSV
• 83. استفاده از Pig برای CSV
• 84. امنیت داده‌ها در فرآیندهای ETL
• 85. اصول ETL در محیط Hadoop
• 86. طراحی Pipeline های ETL
• 87. پیاده‌سازی ETL با ابزارهای Hadoop
• 88. مدیریت کیفیت داده‌ها
• 89. خودکارسازی فرآیندهای ETL
• 90. مدیریت و تحلیل داده‌های زمانی
• 91. مبانی داده‌های زمانی
• 92. پردازش داده‌های زمانی با Spark
• 93. استفاده از ابزارهای تحلیل داده‌های زمانی
• 94. مدیریت داده‌های مکانی
• 95. مبانی داده‌های مکانی
• 96. پردازش داده‌های مکانی با Spark
• 97. استفاده از ابزارهای تحلیل داده‌های مکانی
• 98. ملاحظات قانونی و شرعی در مدیریت داده‌ها
• 99. اصول حفاظت از داده‌ها مطابق قوانین ایران
• 100. ملاحظات شرعی در ذخیره‌سازی و پردازش اطلاعات