محاسبه میزان هاست اشغالی وبسایت ها با استفاده از تکنیک نگاشت -کاهش

با پیشرفت تکنولوژی و همچنین گستردگی اینترنت، حجم داده ها به صورت نمایی نمو پیدا کرده است. بهره برداری اطلاعات از داده های بزرگ امروزه دارای اهمیت ویژهای است. این مقاله یک سیستم یکپارچه و موازی برای بدست آوردن میزان هاست اشغالی وب سایت ها معرفی می کند. در این مقاله با استفاده از روش نگاشت کاهش آدرس وب سایت های مشخص شده به سیستم داده می شود و سیستم با استفاده از تکنیک نگاشت میزان حجم هر صفحه را محاسبه می کند و با کلید متناظر آنها را ذخیره مینماید. آنگاه با استفاده از کاهش دهنده، کلیدهای مشابه شناسایی گردیده و مقدار آنها یکپارچه می گردند. همانطور که در نتیجه نشان داده شده است حجم صفحات چند وب سایت داخلی و خارجی به صورت موازی بدست می آید.

کلیدواژه ها:

وب کاوی ، پردازش موازی ، نگاشت ، کاهش ، داده های بزرگ ، محاسبه هاست وب سایت ها