هريتركس
المحتويات
- Content-Type: text/html
- أداة سطر الأوامر
- أدوات معالجة القوس
- URL IP-address Archive-date Content-type Archive-length
- NutchWAX - البحث في مجموعات ارشيف الويب
- طريقة تشغيل هيراتراكس على ويندوز
- قوس الملفات
- arcreader -o 140 -f dump IA-2006062.arc
- arcreader IA-2006062.arc
- مشاريع استخدمت هيراتراكس
- مكتبة كاليفورنيا الرقمية لخدمات أرشفة الويب
- ادوات لمعالجة ملفات القوس

تعريفًا بالموضوع، هيراتراكس (Heritrix) هو زاحف أرشيف أنترنت، والذي صمم خصيصا للأرشفة ويب. فهو مفتوح المصدر ومكتوب بلغة جافا. الواجهة الرئيسية للوصول باستخدام متصفح ويب، وهناك أداة سطر الأوامر التي يمكن اختياريا استخدامها لبدء بالزحف. وفيما يلي تفاصيل أوسع عن ذلك.
كذلك، طور هيراتراكس بالاشتراك مع أرشيف الإنترنت والمكتبات الوطنية في الشمال المواصفات المكتوبة في أوائل عام 2003. وكان إطلاقه الرسمي في أول يناير 2004، وتم تحسينها باستمرار من قبل العاملين في أرشيف الإنترنت وغيرها من الأطراف المهتمة.
Content-Type: text/html
Hello World!!!
أداة سطر الأوامر
وفي هذا السياق، manifest_bundle.pl - حزم في جميع الموارد المشار إليه بواسطة ملف الزحف واضح إلى غير مضغوط أو مضغوط الكرة القطران
- cmdline-jmxclient - تمكن سطر الأوامر السيطرة على هيراتراكس
- arcreader - مقتطفات محتويات الملفات القوس (انظر أعلاه)
- انظر كذلك
- أرشيف الإنترنت
- المراجع
- هيراتراكس يأتي مع أدوات سطر الأوامر عدة:
- htmlextractor - يعرض وصلات لاستخراج هيراتراكس بعنوان معين
- hoppath.pl - يعيد المسار هوب (طريق وصلات) إلى عنوان محدد من الزحف الانتهاء
أدوات معالجة القوس
WERA (Web ARchive Access)
URL IP-address Archive-date Content-type Archive-length
- http://foo.edu:80/hello.html 127.10.100.2 19961104142103 text/html 187
- HTTP/1.1 200 OK
- Date: Thu, 22 Jun 2006 19:01:15 GMT
- Server: Apache
- Last-Modified: Sat, 10 Jun 2006 22:33:11 GMT
- Content-Length: 30
NutchWAX - البحث في مجموعات ارشيف الويب
إضافةً إلى ذلك، Wayback (Open source Wayback Machine) - بحث وتصفح الويب باستخدام مجموعات الأرشيف NutchWax
تنسيق أو امتداد ملف القوس
روابط لأدوات لها علاقة:
طريقة تشغيل هيراتراكس على ويندوز
من جانب آخر، WERA (Web ARchive Access) - بحث وتصفح الويب باستخدام مجموعات الأرشيف NutchWAX
قوس الملفات
وفي هذا السياق، يقوم ملف القوس بتخزين متعددة الموارد المؤرشفة في ملف واحد من أجل تجنب إدارة عدد كبير من الملفات الصغيرة. يتكون الملف من سلسلة من السجلات العنوان، كل رأس يحتوي بيانات وصفية حول كيفية طلب الموارد تليها راس HTTP والاستجابة لها. ملفات القوس تتراوح ما بين 100 حتي 600 ميغا بايت.
- مثلًا:
- filedesc://IA-2006062.arc 0.0.0.0 20060622190110 text/plain 76
- 1 1 InternetArchive
ومن جهة أخرى، في الاصل تخزن هيراتراكس موارد الإنترنت التي تزحف عليها في ملف القوس. هذا القوس ليست لها علاقة كليا لمركز البحوث الزراعية (تنسيق ملف). وقد استعمل هذا الشكل من أرشيف الإنترنت منذ عام 1996 لتخزين الأرشيف على شبكة الويب. ويمكن كذلك تنسيق الملف WARC، مماثلة لـARC ولكن أكثر دقة ومرونة. يمكن كذلك أن يتم تكوين هيراتراكس لتخزين الملفات في شكل دليل مشابهة لزاحف وجت المستعمل عنوان إلى اسم الدليل واسم كل مورد.
arcreader -o 140 -f dump IA-2006062.arc
أدوات أخرى:
arcreader IA-2006062.arc
كذلك، الأمر التالي مقتطفات hello.html من المثال أعلاه بافتراض السجل يبدأ عند إزاحة 140:
مشاريع استخدمت هيراتراكس
- وهناك عدد من المنظمات والمكتبات الوطنية تستعمل هيراتراكس، من بينها:
- مكتبة فرنسا الوطنية
- المكتبة البريطانية
مكتبة كاليفورنيا الرقمية لخدمات أرشفة الويب
- سيتي سير إكس (CiteSeerX)
- توثيق انترنت2
- أرشيف ومكتبة كندا
- مكتبة الجامعة والوطنية في أيسلندا
- المكتبة الوطنية الفنلندية
- المكتبة الوطنية في نيوزيلندا
- Netarkivet.dk
- المكتبة الوطنية النمساوية، أرشفة الويب
- المكتبة الأسكندرية لارشفة الإنترنت
ادوات لمعالجة ملفات القوس
ومن جهة أخرى، هيراتراكس يتضمن أداة سطر الأوامر تسمى arcreader والتي يمكن استخدامها لاستخراج محتويات ملف القوس. الأمر التالي يسرد كافة عناوين المواقع والبيانات المخزنة في ملف القوس معين (بصيغة CDX) :
📝 هل في هذه المقالة خطأ؟
إذا وجدت معلومة تحتاج تصحيحاً أو إضافة، أو أردت حذف المقالة، أرسل لنا طلباً وسنراجعه.
ما رأيك في هذه المقالة؟