MDP. مجموعة أدوات وحدات لمكتبة معالجة البيانات
التحميل الان

MDP. الترتيب والملخص

MDP. العلامات

مكتبة بيثون أدوات وحدات البيانات معالجة البيانات مجموعة أدوات وحدات

MDP. وصف

مجموعة أدوات وحدات لمكتبة معالجة البيانات MDP (مجموعة أدوات وحدات لمعالجة البيانات) هي مكتبة من خوارزميات معالجة البيانات المستخدمة على نطاق واسع والتي يمكن دمجها وفقا لتشبيه خطوط الأنابيب لإنشاء برنامج لمعالجة البيانات أكثر تعقيدا. من وجهة نظر المستخدم، يتكون MDP من مجموعة من خوارزميات التعلم الإشراف وغير الخاضعة للإشراف وغيرها من وحدات معالجة البيانات الأخرى (العقد) التي يمكن دمجها في تسلسل معالجة البيانات (التدفقات) وهيكل شبكة التغذية الأكثر تعقيدا. نظرا لمجموعة من بيانات الإدخال، تعتني MDP بتدريب أو تنفيذ جميع العقد على التوالي أو تنفيذها على التوالي. يسمح هذا للمستخدم بتحديد الخوارزميات المعقدة كسلسلة من خطوات معالجة البيانات أبسط بطريقة طبيعية. زيادة قاعدة الخوارزميات المتاحة بشكل مطرد وتتضمن، على سبيل المثال لا الحقل، ولكن تحليل المكون الرئيسي الأكثر شيوعا (PCA و Nipals)، عدة مستقل خوارزميات تحليل المكونات (Cubica، Fastica، TDSEP، JADE، و XSFA)، تحليل الميزات البطيئة، Gaussian Screifiers، آلة Boltzmann المقيدة، وتم أخذ الرعاية الخطية المحلية. الرعاية الجارية لإجراء حساب فعال من حيث السرعة والذاكرة. لتقليل متطلبات الذاكرة، من الممكن إجراء التعلم باستخدام دفعات البيانات، وتحديد المعلمات الداخلية للعقد لتكون دقة واحدة، مما يجعل استخدام مجموعات البيانات الكبيرة جدا ممكنة. علاوة على ذلك، تقدم الفرعية الفرعية "الموازية" تطبيقا متوازا للعقد والتدفقات الأساسية. من وجهة نظر المطور، يعد MDP إطارا يقوم بتنفيذ خوارزميات تعليمية جديدة للإشراف وغير الخاضعة للإشراف سهلة ومباشرة. الفئة الأساسية، "العقدة"، تعتني بالمهام الشاقة مثل التحقق من النوع العددي وأبعاد الأبعاد، وترك المطور مجانا للتركيز على تنفيذ مراحل التعلم والتنفيذ. بسبب الواجهة المشتركة، فإن العقدة يتكامل تلقائيا مع بقية المكتبة ويمكن استخدامها في شبكة مع العقد الأخرى. يمكن أن تحتوي العقدة على مراحل تدريب متعددة وحتى عدد غير محدد من المراحل. يسمح ذلك بتنفيذ الخوارزميات التي تحتاج إلى جمع بعض الإحصاءات حول المدخلات بأكملها قبل المتابعة مع التدريب الفعلي، والبعض الآخر يحتاج إلى التكرار في مرحلة التدريب حتى معيار التقارب راضيا. تتم الاحتفاظ بالقدرة على تدريب كل مرحلة باستخدام قطع من بيانات الإدخال إذا تم إنشاء القطع مع محاصرات. علاوة على ذلك، يتوفر استعادة التحطم اختياريا: في حالة الفشل، يتم حفظ الحالة الحالية للتدفق في الفحص لاحقا. تمت كتابة MDP في سياق البحوث النظرية في علم الأعصاب، ولكن تم تصميمه ليكون مفيدا في أي سياق يتم استخدام خوارزميات معالجة البيانات القابلة للتدريب. إن بساطتها على جانب المستخدم مع إعادة استخدام العقد المنفذة تجعلها أداة تعليمية صالحة. متطلبات: بيثون numpy. SCIPY. ما الجديد في هذا الإصدار: 2009-06-30: اكتشاف إضافي عبر الإنترنت من الخلفية العددية، ودعم الثعبان الموازي، symeig backend و backend العددية لإخراج اختبارات الوحدات. يجب أن تساعد في تصحيح الأخطاء. 2009-06-12: دمج العقد القطع والرسيموجرية. 2009-06-12: خطأ ثابت في تدفق متوازي (معالجة الاستثناء). 2009-06-09: خطأ ثابت في llenode عند الإخراج_dim هو تعويم. شكرا لكونراد هينسين. 2009-06-05: الأخطاء الثابتة في التدفق الموازي لعدة مجدول. 2009-06-05: إصلاح الخلل في طبقة معكوس، وذلك بفضل ألبرتو إسكالانتي. 2009-04-29: أضيفت الخطية الخطية. 2009-03-31: PCANODE لا يشتكي بعد الآن عندما يكون مصفوفة التغليف Eigenvalues سلبية IFF SVD == صحيح أو تقليل == صحيح. إذا تم تحديد EXUT_DIM يحتوي على تباين مرغوب فيه، يتم تجاهل Eigenvalues السلبي. تحسن رسالة خطأ ل Sfanode في حالة eigenvalues السلبية، نقترح الآن لإعداد العقدة مع pcanode (svd = true) أو pcanode (class = true). 2009-03-26: ترحيل من حزمة الموضوع القديم إلى الخيوط الجديدة واحدة. إضافة علامة لتعطيل التخزين المؤقت في جدولة العملية. هناك بعض التغييرات العاجلة للخروجات المخصصة (التدريب أو التنفيذ المتوازي لا يتأثر). 2009-03-25: إضافة دعم تعقب المراجعة SVN. 2009-03-25: إزالتها Follow_Calable Flag for Scheduler، يتم استبدال هذا الآن تماما عن طريق Forking هذا ليس له أي تأثير على واجهة Parallelflow مريحة، ولكن يتم كسر المجدول المخصصين. 2009-03-22: تم تنفيذه التخزين المؤقت في المخططات. 2009-02-22: Make_Parallel يعمل الآن في مكان تماما لحفظ الذاكرة. 2009-02-12: أضافت طرق الحاويات المضافة إلى Flowode. 2009-03-03: أضاف crosscovariancematrix مع الاختبارات. 2009-02-03: أضيفت IdentityNode. 2009-01-30: أضيفت وظيفة المساعد في HINET عرض تمثيل HTML Flow مباشرة. 2009-01-22: السماح بإخراج_dim في طبقة ليتم ضبطك على المكدس. 2008-12-23: أضيفت Total_Variance إلى عقدة Nipals. 2008-12-23: حدد دائما موضحا_Variance و Total_Variance بعد التدريب في PCANODE. 2008-12-12: تعديل Symrand لتعزيز المصفوفات المتماثلة حقا (وليس فقط بالتأكيد موجبة). تكييف gaussianclassioteNode لحساب ذلك. تكييفها أنيمراند للعودة أيضا مصفوفات الهيرميتية المعقدة. 2008-12-11: تم إصلاح مشكلة واحدة في PCANODE (عند ضبط الإخراج_dim على Input_Dim تم التعامل مع الفرق الإجمالي غير معروف). المعلمة var_part ثابتة في parallelpcanode. 2008-12-11: تمت إضافة ميزة Var_Part المضافة إلى PCANODE (مرشح وفقا للتباين بالنسبة للتباين Obsoute). 2008-12-04: محور محور ثابت ثابت في دعوة عمياء في البرنامج التعليمي. بفضل صموئيل جون! 2008-12-04: تم إصلاح التعامل مع اختبار البيانات الفارغة في Parallelflow. وأضاف أيضا إجراءات اختبار القطار الفارغة في التدفق العادي (ارفع استثناء إذا كان جهاز الكمبيوتر فارغا). 2008-11-19: المعدلة PCA وعقد SFA للتحقق من Eigenvalues Negaive Matries COV 2008-11-19: Symeig متكامل في SCIPY، يمكن أن يستخدمه MDP من هناك الآن. 2008-11-18: أضيفت Parallelfdanode. 2008-11-18: قام بتحديث القطار Callable for Parallelflow لدعم حجج إضافية. 2008-11-05: إعادة كتابة التعليمات البرمجية المتوازية، يدعم الآن هياكل HINET. 2008-11-03: إعادة كتابة الخالق HINET HTML Recompentation. لسوء الحظ، هذا يكسر أيضا الواجهة العامة، ولكن التغييرات بسيطة جدا. 2008-10-29: إغلاق التحذيرات القادمة من العمليات النائية في colorsscheduler 2008-10-27: مشكلة ثابتة مع الكتابة فوق Kwargs في طريقة INIT PARALLELFLOW. 2008-10-24: علة العقد ثابت مسبقا مسبقا في HINET.FLOWNODE. 2008-10-20: خطأ استيراد ثابت ثابت في حزمة متوازية عند تثبيت PP (مكتبة Python الموازية).

MDP. برامج ذات صلة