الگوریتمی بهینه برای توازن سازی بار به صورت پویا در اکوسیستم هدوپ
محل انتشار: نخستین کنفرانس بین المللی فناوری اطلاعات
سال انتشار: 1394
نوع سند: مقاله کنفرانسی
زبان: فارسی
مشاهده: 511
فایل این مقاله در 7 صفحه با فرمت PDF و WORD قابل دریافت می باشد
- صدور گواهی نمایه سازی
- من نویسنده این مقاله هستم
استخراج به نرم افزارهای پژوهشی:
شناسه ملی سند علمی:
FBFI01_052
تاریخ نمایه سازی: 9 مرداد 1395
چکیده مقاله:
سیستم فایل توزیع شده هدوپ راه کاری است قدرتمند که برای ذخیره و پردازش حجم انبوهی از داده در کلاستری از هزاران سرور عامل ویژگی های بسیاری به ارمغان می آورد. اجرای کنونی هدوپ مبتنی بر فرضیه ای است که تمام نودهای کلاستر هدوپ به صورت همگن هستند. بر اساس راه کار هدوپ، داده در کلاستر هدوپ به بلاک های داده تقسیم می شود و بلاک به تعداد فاکتور تکرار در دیگر نودها کپی می شود. با تکرار داده، زمان خدمت دهی به برنامه هایی که دسترسی به داده ذخیره شده در هدوپ دارند به صورت قابل ملاحظه بهینه می گردد. هنگامی که تعداد برنامه ها فراتر از تعداد کپی های داده برسد و یا قدرت پردازشینودهای کلاستر هدوپ تفاوت داشته باشد قضیه به همین راحتی نخواهد بود. این مقاله در مورد توازن بار پویا در کلاستر هدوپ ناهمگن می پردازد. توازن بار با استفاده از تکرار داده به صورت پویا و با کمترین هزینه جابجایی داده، مبتنی بر تعداد برنامه موازی مپ ردیوسورودی انجام می گردد. طبق آزمایش های انجام شده به جهت توازن بار پویای داده، زمان خدمت دهی به برنامه های مپ ردیوس بیشتر از 33 درصد بهبود می یابد و زمان انتظار بیش از 59 درصد نسبت به الگوریتم پیش فرض هدوپ بهبود می یابد.
کلیدواژه ها:
نویسندگان
سعید گلزار
دانشگاه آزاد اسلامی، واحد اراک،گروه کامپیوتر، اراک، ایران
مراجع و منابع این مقاله:
لیست زیر مراجع و منابع استفاده شده در این مقاله را نمایش می دهد. این مراجع به صورت کاملا ماشینی و بر اساس هوش مصنوعی استخراج شده اند و لذا ممکن است دارای اشکالاتی باشند که به مرور زمان دقت استخراج این محتوا افزایش می یابد. مراجعی که مقالات مربوط به آنها در سیویلیکا نمایه شده و پیدا شده اند، به خود مقاله لینک شده اند :