0% Complete
صفحه اصلی
/
ورود به سیستم
/
سوالات متداول
/
تماس با ما
صفحه اصلی
/
هفتمین کنفرانس ملی و اولین کنفرانس بین المللی محاسبات توزیعی و پردازش داده های بزرگ
بررسی روش های بهینه کردن میزان سازی پیکربندی چارچوب های تحلیل کلان داده
A survey on optimization methods for tuning the configuration of big data analysis frameworks
نویسندگان :
محسن حسینعلی زاده ( دانشگاه آزاد اسلامی واحد همدان )
کلید واژه ها :
اسپارک،بهینه سازی،تنظیم پیکربندی،میزان سازی،هادوپ
چکیده مقاله :
امروزه با افزایش روزافزون حجم اطلاعات و داده‌ها در بستر وب، چارچوب‌های تحلیل داده‌های کلان مختلفی مانند هادوپ و اسپارک پدیدآمده است. برای استفاده مناسب و عملکرد بهینه این چارچوب‌ها، پیکربندی آن‌ها نقش بسیار مهمی را ایفا می کنند. انتخاب پیکربندی مناسب برای چارچوب‌هایی مانند اسپارک و هادوپ برای اطمینان از اجرای مؤثر دسته یا جریانی از کارهای دشوار است و تصمیم‌گیری در مورد این که کدام تنظیمات پیکربندی منجر به بهترین عملکرد می‌شود، کار بسیار پر هزینه‌ای است، زیرا فضای پیکربندی عظیمی برای کشف وجود دارد که از پارامترهای متعدد مربوط به عملکرد در ابعاد مختلف تشکیل شده است. شناسایی ترکیبی از تنظیماتی که ممکن است عملکرد یک برنامه خاص را بهبود بخشد، امری غیر بدیهی است، زیرا تأثیر هر تنظیم بر عملکرد ممکن است در بین برنامه‌ها متفاوت باشد. در این مقاله سعی شده که روش‌ها و سبک‌های متفاوتی برای بهینه‌کردن تنظیمات پیکربندی چارچوب‌های تحلیل داده ارائه شده، بررسی شود. این روش‌ها با بهره‌گیری از الگوریتم‌هایی مانند الگوریتم ژنتیک، الگوریتم بهینه‌سازی ازدحام ذرات، الگوریتم بهینه‌سازی چندمنظوره،H-Tune ، BestConfig و متدهای تنظیم خودکار پیکربندی، به سمت بهتر و بهینه بودن پیکربندی‌ها حرکت کرده‌اند.
لیست مقالات این رویداد
Samin Hamayesh
