کار با مشکل فایل های کوچک در فایل توزیع سیستم Hadoop

سال انتشار: 1397
نوع سند: مقاله کنفرانسی
زبان: فارسی
مشاهده: 617

فایل این مقاله در 13 صفحه با فرمت PDF قابل دریافت می باشد

استخراج به نرم افزارهای پژوهشی:

لینک ثابت به این مقاله:

شناسه ملی سند علمی:

MGCONF02_125

تاریخ نمایه سازی: 11 شهریور 1397

چکیده مقاله:

استفاده از Hadoop در سال های اخیر به طور قابل توجهی افزایش یافته است . برخی از کاربران بزرگ قابل توجه مانند یاهو ، فیس بوک ، Netflix و آمازون Hadoop عمدتا برای تجزیه و تحلیل داده های غیر ساختاری به عنوان چارچوب Hadoop بسیار خوب با داده های ساختار یافته و بدون ساختار کار می کند. Hadoop فایل سیستم توزیع شده (HDFS) برای ذخیره فایل های بزرگ است ، اما هنگامی که تعداد زیادی فایل کوچک نیاز به ذخیره دارند، HDFS با مشکلاتی مواجه است ، زیرا تمام فایل ها در HDFS توسط یک سرور مدیریت می شوند. روش های مختلفی پیشنهاد شده است تا مشکل HDFS با مشکلاتی کوچک حل شود . این مقاله تجزیه و تحلیل تطبیقی روش هایی را ارایه می دهد که با مشکلاتی در فایل

کلیدواژه ها:

نویسندگان

خسرو آب سالان

باشگاه پژوهشگران جوان و نخبگان، واحد شیراز، دانشگاه آزاد اسلامی، شیراز، ایران

نرگس پیروی

عضو هیات علمی دانشگاه آزاد اسلامی، واحد زرقان، ایران