"ذخیره‌سازی و تحلیل در سطح اینترنت" از مجموعه کتب "راهنمای کامل هدوپ"(بخش دوم)

در فصل دوم کتاب مفهوم MapReduce تشریح می گردد که یک مدل برنامه نویسی ساده بوده و برای حل مسائل محاسباتی در مقیاس وسیع و نیز به صورت توزیعی، مورد استفاده قرار می‌گیرد. MapReduce، به زبان‌های مختلف پیاده‌سازی شده است.

"ذخیره‌سازی و تحلیل در سطح اینترنت" از مجموعه کتب "راهنمای کامل هدوپ" (بخش نوزدهم)

Apache Spark یک چارچوب محاسباتی خوشه‌ای برای پردازش داده در مقیاس بزرگ است. برخلاف بسیاری از چارچوب‌های پردازش دیگر که در این کتاب مورد بحث قرار گرفته است، Spark از MapReduce به عنوان موتور اجرا استفاده نمی‌کند. در عوض، برای اجرای کار روی یک خوشه از زمان اجرای توزیع شده خود استفاده می‌کند. Spark  طوری با Hadoop یکپارچه شده است که می‌تواند YARN را اجرا کند و با فرمت‌های فایل Hadoop و پشتیبان‌های ذخیره‌سازی مانند HDFS کار کند.

معرفی کتاب "Big Data Analytics in Healthcare"

با توجه به رشد حجم داده‌های تولید شده در صنعت سلامت و کاربرد داده‌های غیرساختار یافته؛ تحلیل عظیم‌داده در بخش سلامت، اطلاعات سودمندی را جهت تصمیم‌گیری‌های مبتنی بر داده فراهم می‌آورد. کتاب تحلیل عظیم داده در سلامت در نه فصل و دو بخش اصلی و با رویکردی کاملا کاربردی، توسط جمعی از متخصصان این حوزه نگارش شده است.

پیش بینی کیفیت عظیم داده در صنعت فرآیند: یک چارچوب مدل‌سازی توزیع شده موازی

این مقاله یک روش مدل‌سازی فرآیند توزیع شده موازی بر اساس چارچوب MapReduce را برای پیش بینی کیفیت عظیم‌داده ارائه نموده است. در مرحله اول به منظور مدل‌سازی داده‌های توزیع شده موازی در چارچوب MapReduce یک معماری تدوین می‌کند. در مرحله دوم، بر اساس رویکرد مدل‌سازی داده‌های توزیع شده موازی؛ یک طرح پیش‌بینی کیفیت عظیم‌داده را توسعه می‌دهد.

"ذخیره‌سازی و تحلیل در سطح اینترنت" از مجموعه کتب "راهنمای کامل هدوپ"(بخش اول)

 در بخش اول آن به نام "Data" به مشكلات حجم داده‌هايي كه امروزه با آن مواجه هستيم، اشاره شده است. در اين بخش نويسنده بيان كرده است که "ما در عصر داده‌ها زندگی می‌کنیم. انداز‌ه‌گیری حجم کل داده‌ها که به صورت الکترونیکی ذخیره می‌شود آسان نیست، اما برآورد IDC اندازه "جهان دیجیتال" را در 4/4 zettabytes در سال 2013 به ارمغان می‌آورد و پیش‌بینی ده برابر رشد (44 zettabytes) را تا سال 2020 می‌کند."

طراحی توسط ب.علی‌میرزایی