أپاتشي هادوپ

أپاتشي هادوپ
Apache Hadoop
شعار هادوپ
المطوّرمؤسسة أپاتشي للبرمجيات
الإطلاق المبدئي10 ديسمبر 2011[1]
الإصدار المستقر
المستودعgit-wip-us.apache.org/repos/asf/hadoop.git،%20https://gitbox.apache.org/repos/asf?p=hadoop.git%D8%8C+https%3A%2F%2Fgithub.com%2Fapache%2Fhadoop
وضع التطويرActive
مكتوب بلغةجاڤا
نظام التشغيلمتعدد المنصات
النوعنظام الملفات الموزعة
الرخصةرخصة أپاتشي 2.0
الموقع الإلكترونيhadoop.apache.org

أپاتشي هادوپ Apache Hadoop، هو هيكل برنامج مفتوح المصدر للتخزين والمعالجة الموزعة للبيانات الضخمة على عناقيد أجهزة السلع. يفصل نظام هادوپ للملفات الموزعة الملفات إلى كتل ضخمة (الافتراضي 64 م.ب أو 128 م.ب) ويوزع الكتب على العقد الموجوة في العنقود. لمعالجة البيانات، ينقل هادوپ ميپ/رديوس الرمز (خاصة ملفات الجار) إلى العقد التي لديها المعلومات المطلوبة، وبعدها تقوم العقد بمعالجة البيانات بالتوازي. يستفيد هذا النهج من موضع البيانات،[3] على خلاف عمارة الحاسوب الفائق التقليدية والتي تعتمد عادة على نظام الملفات المتوازية (حوسبة وفصل البيانات، لكنها تكون متصلة بتشبيك عالي السرعة).[4]

منذ 2012،[5] في كثير من الأحيان لا يشير مصطلح "هادوپ" إلى مجرد قاعدة حزمة هادوپ وإنما يشير إلى منظومة هادوپ البيئية، والتي تشمل جميع مجموعات البرمجيات الإضافية التي يمكن حميلها على رأس أو جنباً إلى جنب مع هادوپ، مثل أپاتشي پيگ، أپاتشي هايڤ، أپاتشي إتش‌بيز، أپاتشي سپارك، وغيرها.[6][7]

يتكون أپاتشي هادوپ من الوحدات التالية:

  • هادوپ كومن Hadoop Common – يحتوي على مكتبات ومرافق تحتاجها وحدات هادوپ الأخرى.
  • نظام هادوپ للملفات الموزعة (HDFS) – نظام ملفات موزعة يخزن البيانات على أجهزة السلع، يوفر نظام عالي التردد عبر العنقود.
  • هادوپ يارن Hadoop YARN – منصة ادارة-مرجعية مسئولة عن ادارة مصادر الحاسوب في العناقيد وتستخدمها لجدولة تطبيقات المستخدمين.
  • هادوپ ماپ‌رديوس Hadoop MapReduce– نموذج برمجة لمعالجة البيانات واسعة النطاق.

أپاتشي هادوپ هي علامة تجارية مسجلة لمؤسسة أپاتشي للبرمجيات.

. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .

التاريخ

العمارة

Hadoop cluster
A multi-node Hadoop cluster


نظام الملفات

نظام هادوپ للملفات الموزعة

أنظمة ملفات أخرى

جوب‌تراكر وتاسك‌تراكر: محرك ميپ‌رديوس


الجدولة

المجدول العادل
مجدول السعة

تطبيقات أخرى

أشهر المستخدمين

ياهو!

فيسبوك

مستخدمون آخرون

استضافة هادوپ في السحاب

هادوپ في ميكروسوفت أزور

هادوپ على خدمات أمازون EC2/S3

. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .

أمازون إلاستك ماپ‌رديوسر

الدعم الصناعي للتجمعات الأكاديمية

استخدام هادوپ في حساب البيئات الزراعية

تكامل كوندور

الدعم التجاري

رأي ASF في استخدم "هادوپ" في أسماء المنتجات

أوراق بحثية

انظر أيضاً

المصادر

  1. ^ "Hadoop Releases". apache.org. Apache Software Foundation. Retrieved 2014-12-06.
  2. ^ "Hadoop Releases". Hadoop.apache.org. Retrieved 2014-12-01.
  3. ^ "What is the Hadoop Distributed File System (HDFS)?". ibm.com. IBM. Retrieved 2014-10-30.
  4. ^ Malak, Michael (2014-09-19). "Data Locality: HPC vs. Hadoop vs. Spark". datascienceassn.org. Data Science Association. Retrieved 2014-10-30.
  5. ^ قالب:Ci web
  6. ^ "Hadoop-related projects at". Hadoop.apache.org. Retrieved 2013-10-17.
  7. ^ Roman, Javi. "The Hadoop Ecosystem Table". github.com. Retrieved 2014-12-06.
  8. ^ "Apache Accumulo User Manual: Security". apache.org. Apache Software Foundation. Retrieved 2014-12-03.

المراجع

وصلات خارجية