روشی برای ادغام و یکپارچهسازی دادههای حجیم در تجارت الکترونیک با استفاده از پلت فرم هدوپ

  • سال انتشار: 1395
  • محل انتشار: اولین همایش بین المللی افق های نوین در علوم پایه و فنی و مهندسی
  • کد COI اختصاصی: THCONF01_128
  • زبان مقاله: فارسی
  • تعداد مشاهده: 525
دانلود فایل این مقاله

نویسندگان

سهیل حنیفی

دانشجوی کارشناسی ارشد،گروه کامپیوتر، واحدصفاشهر، دانشگاه آزاد اسلامی، صفاشهر، ایران

موسی مجرد

عضو هیات علمی دانشگاه آزاد اسلامی، واحد فیروزآباد، گروه کامپیوتر فیروزآباد، ایران

علیرضا هنرور

عضو هیات علمی دانشگاه آزاد اسلامی، گروه کامپیوتر، واحدصفاشهر، دانشگاه آزاد اسلامی، صفاشهر، ایران

چکیده

منابع داده اغلب فقط داده های جاری را ذخیره سازی می نمایند و داده های تاریخی را در خود نگهداری نمی کنند . همچنین تصمیم گیری در شرکت های تجاری نیازمند یک دید یکپارچه از همه داده های سازمانی، شامل اطلاعات تاریخی می باشد . یک پایگاه داده تحلیلی از اطلاعات جمع آوریشده از منابع متعدد میباشد که تحت یک شمای یکپارچه در یک سایت ذخیره شده اند، تا حد زیادی انجام پرس و جو را ساده می کند و همچنین امکان مطالعه در خصوص رویه های تاریخی را نیز فراهم می سازد و نیز بار پرس و جو برایپشتیبانی از تصمیم را از روی سیستم های پردازش تراکنش برمی دارد. از آنجایی که مجموعه داده مورد استفاده در این پژوهش جزء دادههای بزرگ میباشد، پیاده سازی روش پیشنهادی برای یکپارچه سازی و ادغام دادهها و ایجاد پایگاه داده تحلیلی با استفاده از ابزار هدوپ و در سه مرحله نگاشت کاهش(پاکسازی، تعیین کلید خارجی و ادغام دادهها با شمای ستارهای) انجام میپذیرد. برای ارزیابی – روش پیشنهادی در بستر هدوپ از فاکتور حجم فضای اشغال شده جهت ادغام دادهها استفاده شده که در مقایسه با روش پایهعملکرد مورد قبولی را داشته است

کلیدواژه ها

یکپارچهسازی و ادغام داده، دادهبزرگ، نگاشت کاهش، شمای ستارهای، هدوپ

اطلاعات بیشتر در مورد COI

COI مخفف عبارت CIVILICA Object Identifier به معنی شناسه سیویلیکا برای اسناد است. COI کدی است که مطابق محل انتشار، به مقالات کنفرانسها و ژورنالهای داخل کشور به هنگام نمایه سازی بر روی پایگاه استنادی سیویلیکا اختصاص می یابد.

کد COI به مفهوم کد ملی اسناد نمایه شده در سیویلیکا است و کدی یکتا و ثابت است و به همین دلیل همواره قابلیت استناد و پیگیری دارد.