زحف الترتيب والملخص
- موقع ويب الناشر:
- http://monkey.org/~provos/
زحف العلامات
زحف وصف
المتنجرات الصغيرة والفعالة تبدأ الأداة المساعدة بالزحف بعمق الأول من الويب في عناوين URL المحددة. يخزن جميع الصور JPEG التي تتطابق مع القيود المكونة. الزحف سريع إلى حد ما ويسمح بإنهاء رشيق. بعد إنهاء الزحف، من الممكن إعادة تشغيله في نفس المكان الذي تم إنهاءه. يحتفظ الزحف بقاعدة بيانات مستمرة تسمح بزحف متعددة دون إعادة النظر في مواقع إعادة النظر. يحتوي Cortrawl على بضعة آلاف من التعليمات البرمجية، مما يجعلها سهلة خصيصا لتخصيصها وتصحيحها. فيما يلي بعض الملامح الرئيسية ل "Crawl": يحفظ الصور المصادفة أو أنواع الوسائط الأخرى اختيار وسائل الإعلام بناء على التعبيرات العادية والحجم استئناف الزحف السابق بعد إنهاء رشيقة قاعدة البيانات المستمرة لزيارة عناوين URL رمز صغير جدا وفعال أبحث DNS غير متزامن يدعم Robots.txt. متطلبات: libvent.
زحف برامج ذات صلة