پردازش و مدیریت داده های بزرگ

با رشد روز افزون شبکه های اجتماعی، مکالمات تلفن همراه و منابع مختلف دیگر ما شاهد عصری با انفجار اطلاعات هستیم و هر روزه تریلیون داده در سراسر جهان ایجاد می شود. این یک حوزه پژوهشی بسیار چالش برانگیز است وجود مکانیزمی برای پردازش اطلاعات حجیم با هزینه مقرون به صرفه بسیار پر اهمیت است چارچوب متن باز Hadoop بستری روی ابر برای ذخیره سازی و پردازش داده های بزرگ می باشد. اصطلاح داده بزرگ تعریف مجموعه ای از مجموعه داده های بزرگ و پیچیده هستند که به مشکل روند استفاده از ابزارهای بزرگ می باشد. اصطلاح داده بزرگ تعریف مجموعه ای از مجموعه داده های بزرگ و پیچیده هستند که به مشکل روند استفاده از ابزارهای پردازش داده ها مرسوم است. ما به ابزارهای جدیدی و تکنیک هایی برای سازماندهی، مدیریت، ذخیره، پردازش و تجزیه و تحلیل داده های بزرگ نیاز داریم. هدف ما در این مقاله ارائه دو بخش مهم سیستم فایل توزیع شده هدوپ که برای مدیریت داده های بزرگ طراحی شده و سرویس نگاشت کاهش که چارچوبی برای پردازش داده های بزرگ در محیط توزیع شده است.

کلیدواژه ها:

پردازش ، داده ها بزرگ ، نگاشت کاهش ، Hadoop ، رایانش ابر