تحلیل داده های بزرگ با استفاده از آپاچی هدوپ

  • سال انتشار: 1394
  • محل انتشار: کنفرانس بین المللی پژوهش در مهندسی، علوم و تکنولوژی
  • کد COI اختصاصی: RSTCONF01_054
  • زبان مقاله: فارسی
  • تعداد مشاهده: 1395
دانلود فایل این مقاله

نویسندگان

پگاه احمدی

دانشجو، کارشناسی ارشد مهندسی نرم افزار، گروه کامپیوتر، دانشگاه آزاد اسلامی واحد کرمانشاه

چکیده

بزرگ داده Big data ، به مجموعه هایی از داده گفته می شود که نرخ رشد آن ها بسیار بالابوده و در مدت زمان کوتاهی، شامل چنان حجمی از اطلاعات می شوند که دریافت، ذخیره سازی،جست وجو، تحلیل، بازیابی و همچنین تصویرسازی آن ها با ابزارهای مدیریت داده موجودغیر قابل انجام خواهد بود. آنچه حائز اهمیت است، این است که برخلاف گذشته، مفهوم داده بزرگ تنها مختص به حوزه آکادمیک و حل مسائل علمی مانند شبیه سازی های پیچیده فیزیکی، تحقیقات زیست محیطی، هواشناسی و مانند آن نبوده و بسیاری از سازمان ها وشرکت های بزرگ در سال های آینده با مشکلات مربوط به داده های انبوه غیرساخت یافته یا همان Big Data مواجه خواهندبود.یکی از راههای تحلیل بزرگ داده ها بکارگیری هادوپ می باشد،که مسائلی را هدف گرفته که یافتن پاسخ آن ها، به تحلیل کل ها روی تعداد داده های موجود در سیستم نیاز دارد.. هادوپ عملیات روی داده های بسیار بزرگ و حجیم رابا مقیاس دهی افقی پردازش بسیار زیادی از سرورها و با استفاده از روش نگاشت - کاهش به انجام می رساند.

کلیدواژه ها

بزرگ داده، آپاچی هدوپ، نگاشت-کاهش، HDFS ، تحلیل بزرگ داده

اطلاعات بیشتر در مورد COI

COI مخفف عبارت CIVILICA Object Identifier به معنی شناسه سیویلیکا برای اسناد است. COI کدی است که مطابق محل انتشار، به مقالات کنفرانسها و ژورنالهای داخل کشور به هنگام نمایه سازی بر روی پایگاه استنادی سیویلیکا اختصاص می یابد.

کد COI به مفهوم کد ملی اسناد نمایه شده در سیویلیکا است و کدی یکتا و ثابت است و به همین دلیل همواره قابلیت استناد و پیگیری دارد.