بهبود توازن بار در مدل نگاشت کاهش جهت پردازش کلان داده در خوشه های ناهمگن

سال انتشار: 1393
نوع سند: مقاله کنفرانسی
زبان: فارسی
مشاهده: 775

فایل این مقاله در 8 صفحه با فرمت PDF قابل دریافت می باشد

استخراج به نرم افزارهای پژوهشی:

لینک ثابت به این مقاله:

شناسه ملی سند علمی:

CITCONF02_233

تاریخ نمایه سازی: 19 اردیبهشت 1395

چکیده مقاله:

در سالهای اخیر، مدلهای برنامه نویسی مختلفی برای پردازش کلان داده 1 ارائه شدهاند. در این میان، مدل نگاشت کاهش - 2 توانسته است محبوبیت زیادی، به ویژه در محیط های رایانش ابری بدست آورد. نگاشت کاهش علاوه بر مزایا و ویژگی های منحصر به فردی که دارد، طبیعتاً دارای - چالش های مختلفی نیز هست. مسئله توازن بار یکی از چالش های مهم در مدل های برنامه نویسی توزیع شده از جمله نگاشت کاهش است، و در - صورتی که سازوکار مناسبی برای آن اتخاذ نشود می تواند باعث افزایش زمان اجرای برنامه ها و در نتیجه کاهش کارایی شود. از جمله معیارهایی که در توازن بار نقش کلیدی دارند، محلیت داده ها و انحراف داده ها هستند. ضمن اینکه برای برقراری توازن بار، باید به همگن یا ناهمگن بودن خوشه های محاسباتی نیز توجه داشت. در این تحقیق، روشی بر اساس کنترل ظرفیت ارائه می شود که توازن بار را در مدل نگاشت کاهش برای - خوشه های ناهمگن بهبود میبخشد. بر اساس ارزیابیها و آزمایش های انجام شده، روش پیشنهادی با افزایش محلیت داده ها و در نتیجه بهبود توازن بار، زمان اجرا را به طور میانگین حدود 20 % بهبود بخشیده است.

نویسندگان

میثم وکیلی

دانشجوی کارشناسی ارشد، گروه مهندسی کامپیوتر، دانشکده فنی و مهندسی، دانشگاه علم و فرهنگ

محمدجواد کارگر

عضو هیئت علمی، گروه مهندسی کامپیوتر، دانشکده فنی و مهندسی، دانشگاه علم و فرهنگ

مراجع و منابع این مقاله:

لیست زیر مراجع و منابع استفاده شده در این مقاله را نمایش می دهد. این مراجع به صورت کاملا ماشینی و بر اساس هوش مصنوعی استخراج شده اند و لذا ممکن است دارای اشکالاتی باشند که به مرور زمان دقت استخراج این محتوا افزایش می یابد. مراجعی که مقالات مربوط به آنها در سیویلیکا نمایه شده و پیدا شده اند، به خود مقاله لینک شده اند :
  • Kaisler, S., Armour, F.. Espinosa, J. A. and Money, W. ...
  • Ji, C., Li, Y., Qiu, W., Awada, U. and Li, ...
  • Hou, K., Zhang, J. and Li, J.-h. (2012), "Review of ...
  • Isard, M., Budiu, M., Yu, Y., Birrell, A. and Fetterly, ...
  • Dean, J. and Ghemawat, S. (2008), "MapReduce: simplified data processing ...
  • Lee, K.-H., Lee, Y.-J., Choi, H., Chung, Y. D. and ...
  • Ranger, C., Raghuraman, _ Penmetsa, A., Bradski, G. and Kozyrakis, ...
  • He, B., Fang, W., Luo, Q., Govindaraju, N. K. and ...
  • Fadika, Z., Dede, E., , Hartog, J. and Govindaraju, M. ...
  • White, T. (2012), "Hadoop: The definitive guide: O'Reilly Media, Inc". ...
  • Shvachko, _ Kuang, H.. Radia, S. and Chansler, R. (2010), ...
  • Ahmad, F., Chakradhar, S. T., Raghunathan, A. and Vijaykumar, T. ...
  • Xie, J., Yin, S., Ruan, X., Ding, Z., Tian, Y., ...
  • Fan, Y., Wu, W., Cao, H., Zhu, H., Zhao, X. ...
  • Gandhi, R., Xie, D. and Hu, Y. C. (2013), "PIKACHU: ...
  • نمایش کامل مراجع