تحلیل داده های بزرگ با استفاده از آپاچی هدوپ

بزرگ داده Big data ، به مجموعه هایی از داده گفته می شود که نرخ رشد آن ها بسیار بالابوده و در مدت زمان کوتاهی، شامل چنان حجمی از اطلاعات می شوند که دریافت، ذخیره سازی،جست وجو، تحلیل، بازیابی و همچنین تصویرسازی آن ها با ابزارهای مدیریت داده موجودغیر قابل انجام خواهد بود. آنچه حائز اهمیت است، این است که برخلاف گذشته، مفهوم داده بزرگ تنها مختص به حوزه آکادمیک و حل مسائل علمی مانند شبیه سازی های پیچیده فیزیکی، تحقیقات زیست محیطی، هواشناسی و مانند آن نبوده و بسیاری از سازمان ها وشرکت های بزرگ در سال های آینده با مشکلات مربوط به داده های انبوه غیرساخت یافته یا همان Big Data مواجه خواهندبود.یکی از راههای تحلیل بزرگ داده ها بکارگیری هادوپ می باشد،که مسائلی را هدف گرفته که یافتن پاسخ آن ها، به تحلیل کل ها روی تعداد داده های موجود در سیستم نیاز دارد.. هادوپ عملیات روی داده های بسیار بزرگ و حجیم رابا مقیاس دهی افقی پردازش بسیار زیادی از سرورها و با استفاده از روش نگاشت - کاهش به انجام می رساند.

کلیدواژه ها:

بزرگ داده ، آپاچی هدوپ ، نگاشت-کاهش ، HDFS ، تحلیل بزرگ داده