استفاده ازالگوی MapReduce برای پردازش داده های حجیم درhadoop

سال انتشار: 1391
نوع سند: مقاله کنفرانسی
زبان: فارسی
مشاهده: 7,931

فایل این مقاله در 10 صفحه با فرمت PDF قابل دریافت می باشد

استخراج به نرم افزارهای پژوهشی:

لینک ثابت به این مقاله:

شناسه ملی سند علمی:

PNUNCIT01_111

تاریخ نمایه سازی: 20 اردیبهشت 1392

چکیده مقاله:

یک hadoop چارچوب نرم افزاری متن باز تحت لیسانس Apache-v2 است Hadoop با استفاده ازسیستم فایل توزیع شده اش پردازش موازی داده ها را روی تعدادزیادی گره موجوددریک خوشه جهت سرعت بخشیدن به محاسبات بزرگ و نیز پنهان سازی تاخیر ورودی با افزایش تعدادورودی همزمان انجام میدهد سیستم فایل توزیع شده Hadoop بصورت ارزان و قابل اعتمادی برای تکرار تکه های داده دریک خوشه بکارگرفته می شود و داده ها بصورت محلی روی ماشینی که عمل پردازش را انجام میدهد قابل دسترسی می باشند MapReduce یک مدل پردازش داده با مقیاس پذیری اسان پردازش داده روی چندین گره محاسباتی است این پارادایم برنامه ها را دردو فاز نگاشت و کاهش اجرا می کند هرفاز توسط یک تابع تعریف میشود که توابع Mapper Reducer نام دارند دراین مقاله ما قصد داریم که به بررسی چارچوب نرم افزاری Apache Hadoop بپردازیم و سیستم فایل توزیع شده آن را شرح دهیم ساختارکلی پارادایم MapReduce را مرور کرده و چگونگی انجام برنامه ها درمحیط نرم افزاری Hadoop را با استفاده ازپارادایم MapReduce بیان کنیم

کلیدواژه ها:

سیستم فایل توزیع شده Hadoop وMapReduce و پایگاه داده های no-Sql

نویسندگان

اسماء زیدآبادی نژاد

دانشگاه علوم و تحقیقات زنجان

داوود محمدپورزنجانی

دانشگاه زنجان

مراجع و منابع این مقاله:

لیست زیر مراجع و منابع استفاده شده در این مقاله را نمایش می دهد. این مراجع به صورت کاملا ماشینی و بر اساس هوش مصنوعی استخراج شده اند و لذا ممکن است دارای اشکالاتی باشند که به مرور زمان دقت استخراج این محتوا افزایش می یابد. مراجعی که مقالات مربوط به آنها در سیویلیکا نمایه شده و پیدا شده اند، به خود مقاله لینک شده اند :
  • "فناوری اطلاعات و شبکه های کامپیوتری دانشگاه پیام نور" دانشگاه ...
  • A. LITH, and J. MATTSON, "Investigating storage ...
  • _ P. NSSHOLM, "Extracting Data from NoSQL Databases ", Exam ...
  • D. Borthakur, "The Hadoop Distributed Fie System: Architecture and Design ...
  • نمایش کامل مراجع