تماما كما تحتاج محركات البحث لرؤية المحتوى من أجل إدراج الصفحات في فهارسها الضخمة المبنية على الكلمات المفتاحية، فإنها تحتاج أيضا إلى رؤية الوصلات أو الروابط من أجل العثور على المحتوى. إن بنية روابط مساعدة في عملية الزحف – بنية تتيح لعناكب البحث تصفح المسارات الخاصة بموقع ما والتي تؤدي على مختلف صفحاته – أمر حيوي من أجل العثور على كافة الصفحات التي يحتويها موقع ما على شبكة الانترنت. مئات الآلاف من المواقع تقع في هذا الخطأ الحساس و الذي يتمتل في هيكلة روابط الموقع بكيفية لا تستطيع بها محركات البحث الوصول إلى جميع صفحات الموقع، مما يؤدي إلى عدم ادراج جميع صفحات الموقع ضمن فهارس محركات البحث او بمعنى أخر لا يتم أرشفتها.
نحاول مساعدتك لنجعل موقعك صديقا لهذه العناكب الالكترونية!