الزحف والفهرسة

الآن بعد أن أصبح لدينا نظرة عامة على كيفية عمل أنظمة البحث وبرنامج Googlebot، سنتعمق في عدة أجزاء رئيسية تؤثر على عملية الزحف والفهرسة.

في هذا الدرس، سنلقي نظرة على:

• أساسيات رموز حالة HTTP.
• البيانات الوصفية وما يبحث عنه زواحف الويب عند تحليل محتوى الويب.
• كيفية التواصل مع Google حتى يعرف زاحف البحث الخاص بها عندما يكون هناك محتوى جديد على موقعك.
• كيفية الاستفادة من علامات روبوتات البيانات الوصفية وروابط الكانونيكال للإشارة إلى محركات البحث حول حالة الفهرسة المطلوبة.