الوكلاء
إضافة صفحة ويب أو زحف موقع
وجّه المكتبة إلى عنوان HTTPS عام، واختر صفحة واحدة أو زحفًا، وأعد الزحف حين يتغير المحتوى.
مصدر الويب يوجّه المكتبة إلى رابط بدلًا من ملف. يمكنك فهرسة صفحة واحدة، أو زحف موقع وفهرسة كل ما يصل إليه الزحف. وفي الحالتين تحصل على لقطة، تحدّثها حين يتغير الموقع.
ما تحتاج إليه
- مساحة عمل أنت عضو فيها.
- عنوان HTTPS عام. تُرفض عناوين HTTP العادية، وعناوين loopback، والنطاقات الخاصة، وعناوين link-local.
- صفحة تُقدّم محتواها كـ HTML. المحتوى الذي يظهر فقط بعد تشغيل JavaScript قد لا يكون متاحًا.
الخطوات
الخطوة 1: افتح نافذة الإضافة
اضغط إضافة في قاعدة المعرفة، أو إضافة جديد في تبويب المعرفة للوكيل، ثم اختر إضافة رابط.
الخطوة 2: اختر صفحة واحدة أو زحفًا
تفتح النافذة على صفحة واحدة، وهي تفهرس الرابط الذي تعطيه بالضبط. انتقل إلى زحف الموقع لتتبع الروابط من ذلك الرابط أيضًا.
الخطوة 3: أدخل الرابط
املأ الرابط بالعنوان كاملًا، يبدأ بـ https://.
الخطوة 4: حدّد حدود الزحف
هذه الحقول الثلاثة تظهر فقط تحت زحف الموقع.
| الحقل | القيمة الابتدائية في البوابة | المدى المقبول |
|---|---|---|
| العمق | 2 | من 1 إلى 5 |
| أقصى عدد صفحات | 100 | من 1 إلى 500 |
| نمط الرابط | فارغ | حتى 500 حرف |
العمق هو عدد القفزات عبر الروابط من عنوان البداية التي يستطيع الزحف أن يسلكها. أقصى عدد صفحات هو السقف الثابت لعدد الصفحات التي يجلبها. نمط الرابط يقيّد الروابط التي تُتبع؛ اتركه فارغًا لتتبع كل ما يجده الزحف.
الخطوة 5: اختر المكان
تحت الموقع، اترك جذر المكتبة ليبقى المصدر منفردًا، أو اختر مجلدًا.
الخطوة 6: أضفه
اضغط إضافة.
للحصول على أفضل نتيجة
حدّد الزحف عند القسم الذي تريده. زحف موقع كامل يملأ المكتبة بصفحات التنقل والمدونة، وهي تنافس الصفحة التي كان المتصل يسأل عنها فعلًا.
الموصى به
URL: https://acme.example/help/returns
Depth: 1
Max pages: 25الأقل فاعلية
URL: https://acme.example
Depth: 5
Max pages: 500ابدأ بـ العمق وأقصى عدد صفحات. أضف نمط الرابط فقط حين تعرف النمط الذي تتبعه روابط ذلك القسم، وتحقق من عدد الصفحات في المصدر المكتمل لترى ما الذي التقطه.
مثال تطبيقي
تضيف https://acme.example/help/returns كزحف بـالعمق 1 وأقصى عدد صفحات 25، في مجلد الإرجاع. يمر الصف بحالة قيد الانتظار، ثم جارٍ الزحف، ثم قيد الفهرسة، ويصل إلى جاهز مع 9 صفحات و61 مقطعًا، ومعه إشعار Web source indexed.
بعد شهرين يتغير موعد الإرجاع. تفتح قائمة الصف في قاعدة المعرفة، وتختار تحديث، فيُزحف الرابط نفسه بالإعدادات نفسها. النتيجة الجديدة تستبدل القديمة، وكل وكيل اختار مجلد الإرجاع يستخدمها في المحادثة التالية.
ماذا يحدث بعد ذلك
يُنشأ المصدر بحالة قيد الانتظار، ثم ينتقل عبر الزحف والفهرسة:
| الحالة | الاسم في البوابة | ماذا يعني |
|---|---|---|
pending |
قيد الانتظار | أُنشئ وينتظر البدء. |
crawling |
جارٍ الزحف | يجلب الصفحات. |
processing |
قيد الفهرسة | انتهى الجلب، ويجري فهرسة النص. |
ready |
جاهز | انتهى. عدد الصفحات وعدد المقاطع معبأ. |
failed |
فشل | لم ينتهِ الزحف أو الفهرسة. يحمل الصف السبب. |
عند الانتهاء يصلك إشعار: Web source indexed، يذكر الرابط مع عدد صفحاته ومقاطعه، أو Web source failed to index مع السبب.
ما يُحفظ هو النص المستخرج من الصفحات، مقسّمًا إلى مقاطع، مع عدد الصفحات. لا يُحفظ HTML الأصلي، لذلك لا يملك مصدر الويب إجراء تنزيل.
مصدر يبقى في جارٍ الزحف أو قيد الفهرسة أكثر من 60 دقيقة يفشل برسالة Indexing timed out. Try again.
إعادة الزحف
تتغير المواقع، ومصدر الويب لقطة من يوم زحفه. لتحديثه، افتح قاعدة المعرفة، وافتح قائمة صف مصدر الويب، واختر تحديث. يُزحف الرابط نفسه بالإعدادات نفسها: يعود المصدر إلى جارٍ الزحف، ويُسجَّل وقت التحديث، وتحل النتيجة الجديدة محل ما فُهرس قبلها. وتحديث هو أيضًا مسار الاستعادة لمصدر ويب فاشل.
حدّثه يدويًا كلما كانت الصفحة مهمة وتغير الموقع.
قائمة الصف في تبويب المعرفة للوكيل تغطي اختيار ذلك الوكيل فقط، لذلك يعيش تحديث في المكتبة.
الحدود
| الحد | القيمة | ينطبق على |
|---|---|---|
| المخطط | HTTPS فقط | كل مصدر ويب |
| المضيف | لا عناوين loopback أو خاصة أو link-local | كل مصدر ويب |
| طول الرابط | 2000 حرف | طلب الإنشاء |
| الاسم المعروض | 200 حرف | طلب الإنشاء وإعادة التسمية |
| العمق | من 1 إلى 5 | الزحف |
| أقصى عدد صفحات | من 1 إلى 500 | الزحف |
| نمط الرابط | 500 حرف | الزحف |
| مهلة الفهرسة | 60 دقيقة | الزحف والفهرسة |
مصادر الويب لا تُحسب من مساحة التخزين المسموح بها في خطتك.
حل المشكلات
استخدم رابطًا عامًا يبدأ بـ https://. العناوين الخاصة أو المحلية مرفوضة.
هذا فحص البوابة نفسها. يبدو العنوان كـ localhost، أو عنوان loopback، أو نطاق خاص مثل 192.168.x.x أو 10.x.x.x.
url must be a public HTTPS URL (no loopback, private, or link-local addresses)
يجب أن يبدأ العنوان بـ https://. تقبل النافذة عنوان http://، ثم يُرفض الطلب. غيّر المخطط إلى https:// وحاول مرة أخرى.
يُرفض التحديث على مصدر لم يُزحف أبدًا
تحديث يعيد تشغيل زحف بدأ مرة واحدة على الأقل. المصدر الذي ما زال قيد الانتظار، أو الذي فشل قبل أن يبدأ، لا شيء لديه لإعادة تشغيله: احذفه وأضفه من جديد.
Indexing timed out. Try again.
زحف لأكثر من ساعة دون نتيجة. جرّب زحفًا أصغر: اخفض العمق، واخفض أقصى عدد صفحات، أو ضيّقه بـ نمط الرابط.
جاهز، لكن عدد الصفحات هو 1 في زحف موقع
لم يجد الزحف أي روابط مسموح له بتتبعها. تأكد أن عنوان البداية يحيل فعلًا إلى صفحات أخرى، وأن نمط الرابط لا يستبعد كل شيء.
جاهز، لكن عدد المقاطع منخفض جدًا
استُخرج نص قليل. السبب الأشيع صفحة تعرض محتواها عبر JavaScript، فيبقى في HTML المجلوب شيء ضئيل جدًا. وجّه الرابط إلى صفحة تُعرض من الخادم، أو ألصق النص كمصدر نصي بدلًا من ذلك.
الأسئلة الشائعة
هل يبقى الزحف متزامنًا مع الموقع؟
لا. الزحف لقطة. استخدم تحديث حين يتغير الموقع.
هل أستطيع زحف صفحة خلف تسجيل دخول؟
لا. يُجلب الرابط دون أي بيانات اعتماد منك، فتعمل الصفحات المتاحة للعامة فقط.
ماذا يحدث للصفحات القديمة عند التحديث؟
يُعاد زحف الرابط نفسه بالإعدادات نفسها، والنتيجة الجديدة تحل محل القديمة لذلك المصدر.
هل أستطيع إضافة روابط كثيرة دفعة واحدة؟
ليس في إجراء واحد. أضف كل رابط كمصدر مستقل، أو وجّه الزحف إلى قسم من الموقع وحدّده بـ العمق وأقصى عدد صفحات.
هل يستهلك مصدر الويب مساحة تخزين؟
لا. الملفات والنصوص الملصقة وحدها تُحسب من مساحة التخزين المسموح بها في خطتك.
صفحات ذات صلة
- كيف تعمل المعرفة: ما يصل إلى الدور، ومتى يصل
- إضافة مستندات إلى المكتبة: ارفع الصفحة ملفًا بدلًا من ذلك
- إضافة نص مباشرة: ألصق النص حين تُعرض الصفحة عبر JavaScript
- تنظيم المعرفة في مجلدات: أبقِ صفحات الموقع معًا
- الوكيل لم يستخدم مستندي: حين يبقى مصدر جاهز بلا استخدام