آموزش کلان داده (قسمت دوم)

آپاچی هدوپ چیست؟

امروزه داده‌ها با نرخ عظیمی در حال تولید هستند. از این‌رو رشته‌های تحلیل کلان داده و علوم داده ظهور پیدا کردند. در تجارت و کسب‌وکارها تکنیک‌های قدیمی و سنتی علوم داده و تحلیل داده به‌کارگرفته می‌شود. اما روش‌های پردازش داده سنتی مناسب پردازش کلان داده نیستند. هدوپ تکنولوژی ایجاد شده برای پردازش و تحلیل کلان داده و علوم داده است.



آپاچی هدوپ یک پروژه متن باز برای مدیریت کلان داده است. در واقع یک پروژه تنها و مجزا نیست، بلکه مجموعه‌ای از چندین پروژه است که با یکدیگر کار می‌کنند. هدوپ با سه مشخصه اصلی کلان داده (حجم داده، نرخ تولید و تنوع) سروکار دارد. آپاچی هدوپ سخت‌افزار متداول بازار را به سرویس‌های ذخیره‌سازی منسجمی که امکان ذخیره‌سازی داده با حجم پتابایت را دارند و همچنین سرویس‌های پردازشی منسجمی که داده را به شکل مؤثر و کارا پردازش می‌کنند، تبدیل می‌نمایند.

ادامه خبر