هامك المصدر المفتوح Hadoop جعل فائدة
التحميل الان

هامك الترتيب والملخص

هامك العلامات

معالجة أتمتة DataSet. عملية DataSet. أتمتة المعالج أتمتة DataSet.

هامك وصف

المصدر المفتوح Hadoop جعل فائدة Hamake هي أداة مساعدة مجانية ومفتوحة تسمح لك بأتمتة المعالجة الإضافية لمجموعات البيانات المخزنة على HDFS باستخدام مهام Hadoop المكتوبة في Java أو باستخدام البرامج النصية Piglatin. يمكن أن تكون Datasets إما ملفات أو دلائل فردية تحتوي على مجموعات من الملفات. قد تتم إضافة ملفات جديدة (أو إزالتها) في موقع تعسفي قد يؤدي إلى إعادة حساب البيانات اعتمادا عليها. يشبه Unix "Make" Unix.First، تقوم بصياغة نموذج المعالجة لك من حيث مواقع البيانات (والتي يمكن استخدامها إما كمدخلات أو مخرجات) ومهمة. في كل نوع من المهام المدعومة (على الرغم من أنها تسمى "الخريطة" و "تقليل" ولكن لا ينبغي الخلط بينها مع هيدوب "خريطة" و "تقليل"): خريطة - هذا نوع من المهمة التي تعرض مجموعة من الملفات في موقع واحد إلى موقع (ق) آخر. تفترض هذه المهمة من 1 إلى 1 تعيين الملفات بين المواقع، ويمكن أن تقوم بمعالجةها تدريجيا وتحويل الملفات فقط الموجودة في موقع المصدر، ولكن ليس على الإطلاق على الإطلاق. متطلبات: بيثون 2.5 أو الأحدث هادوب 0.18.3 أو الأحدث hadooopthriftserver (متوفر في صفحة التنزيلات)

هامك برامج ذات صلة