الفهرسة Indexing وعلاقتها بتحسين محركات البحث

عندما تمتلك موقع إلكتروني أو متجر إلكتروني تكون حاجتك كبيرة للتأكد من قابلية فهرسة صفحات الموقع الإلكتروني في محركات البحث مثل محرك البحث Google الذي يُعتبر من أهم المحركات التي يَستخدمها الأشخاص في العثور على مختلف المعلومات التي يحتاجونها.

لذا أقدم لكُم اليوم دليل حول الفهرسة وأهميتها، بالإضافة إلى توضيح الآتي:

• كيفية التحقُق لمعرفة إذا كانت صفحتك مفهرسة أم لا.
• كيف تتم الفهرسة أو الأرشفة الـ Indexing لموقعك في محرك البحث جوجل.
• متى تتم إزالة صفحات موقعك من محركات البحث.
• الوقت الذي تستغرقه محركات البحث في اكتشاف الصفحات وأرشفتها.

ما أساس ظهور الموقع في محركات البحث؟

إن ظهور الموقع الإلكتروني في محركات البحث يعتمد على ثلاث عناصر وهُم «الزحف Crawling – الفهرسة Indexing – الترتيب Ranking» 

1. الزحف Crawling 

تقوم عناكب البحث أو ما تُعرف بـ “Googlebot” بالزحف إلى مُوقعك الإلكتروني لمعرفة إذا كان موقعك يستحق الفهرسة أم لا. 

فهي تقوم دائمًا بالزحف إلى صفحات الموقع الإلكتروني لتتعرف عليها، وتتبع الروابط الموجودة داخل هذه الصفحات حتى تعثر على محتوى جديد.

2. الفهرسة Indexing

بعد زحف عناكب البحث لاكتشاف صفحات الموقع وقياس أهميتها، تبدأ هذه العناكب في الفهرسة حتى تُضيف موقعك إلى قاعدة بيانات محركات البحث أو ما يُعرف بالـ الفهرس في محرك البحث Google.

3. الترتيب Ranking

بعد ظهور الموقع في محركات البحث نجد إنه يحصل على ترتيب في إحدى صفحات الـ SERP، ومنذ الحصول على هذا الترتيب يبدأ المسؤول عن تحسين الموقع بتوجيه اهتمامه بتحسين ترتيبه في نتائج البحث وهي خطوة مهمة.

حيث يتمّ ظهور محتوى موقعك المتواجد في فهرس محركات البحث للمستخدم الـ SERP بناء على عدة عوامل…

مثل (سهولة الاستخدام، تناسب الموقع مع جميع الأجهزة، سرعة استجابة الموقع، وجود محتوى قيم) وغيرها من النقاط التي تجعل جوجل يُفضل موقعك ويُحسن ترتيبه في صفحات نتائج البحث الـ SERP.

لكن ما المفهوم التفصيلي للفهرسة Indexing؟

يُشير مفهوم الفهرسة Indexing، إلى اكتشاف عناكب البحث الصفحات الخاصة بموقعك، ثم البدء في قياس جودة هذه الصفحات حتى يقوم بإظهارها في نتائج عمليات البحث.

ذلك يَعني أن الفهرسة هي تخزين الموقع في قواعد بيانات Google وليس يَعني ظهور الموقع في النتائج الاولى من الـ SERPs.

وإذا لم يقوم محرك بحث Google بفهرسة موقع الويب الخاص بك، فلن تظهر صفحات موقعك في نتائج محركات البحث.

لماذا تعتبر فهرسة الموقع مهمة؟

إن فهرسة الموقع عامل هام لتحسين الترتيب وجلب المزيد من الزيارات، كما نجد أن مواقع الويب التي لم تتم فهرستها ليست في قاعدة بيانات Google. وبالتالي لا يمكن لمحرك البحث تقديم مواقع الويب هذه في صفحات نتائج محرك البحث (SERPs).

كيف تتم الفهرسة Indexing للمواقع الإلكترونية؟

سواء كنت تَمتلك موقع أو متجر أو تعمل في التسويق عبر الإنترنت، فيجب عليك مَعرفة كيفية أرشفة أو فهرسة موقعك بكفاءة وسرعة، إليك كيفية تحقيق ذلك:

تحسين ملف Robots.txt الخاص بموقعك

إن ملفات Robots.txt هي الملفات التي يتعرف عليها عناكب البحث أو الـ Googlebot كمؤشر للزحف إلى صفحات موقعك الإلكتروني، وبذلك تكون العامل المُساعد لأرشفة صفحات موقعك في صفحات نتائج البحث.

تأكد من سلامة جميع علامات تحسين محركات البحث الخاصة بموقعك

تعد علامات تحسين محركات البحث (SEO) طريقة أخرى لتوجيه عناكب محركات البحث مثل Googlebot لصفحات موقعك. 

كما يوجد نوعان رئيسيان من علامات تحسين محركات البحث التي يجب عليك تحسينها، وهما (الـ Rogue no index tags والـ Canonical tags).

أولاً الـ Rogue no index tags:

إن علامات (no index) هي التي تَخبر محركات البحث بعدم فهرسة الصفحات التي تتواجد بها، لذا إذا لم تتم فهرسة صفحات معينة يجب العلم بأنها تحتوي على علامات (no index).

كما يمكن التَحقق عن هذه العلامات من خلال طريقتين:

1. العلامات الوصفية الـ Meta tags:

يمكنك التحقق من الصفحات الموجودة على موقعك التي تحتوي على علامات no index الوصفية من خلال البحث عن تحذيرات ” no index page – صفحة no index”. 

فإذا تم وضع علامة no index على إحدى الصفحات، فقم بإزالة العلامة الوصفية حتى تتم فهرستها مرة أخرى.

2. الـ X-Robots-Tag: 

في هذه الحالة يُمكنك استخدام Google Search Console لمعرفة الصفحات التي تحتوي على X-Robots-Tag في أكواد الـ HTML الخاصة بها. 

• من خلال استخدام أداة فحص عنوان URL المتواجدة في أعلى موقعك على أدوات مشرفي المواقع.
• قم بوضع رابط الصفحة ثم اضغط Enter.
•  بعد دخول الصفحة، ابحث عن الرد على السؤال “هل الفهرسة مسموح بها؟”.

 إذا رأيت الكلمات “لا: تم اكتشاف” noindex “في كود http” X ‑ Robots-Tag”، فيجب عليك العلم بأن هناك علامة X-Robots-Tag تحتاج إلى إزالتها لتتم الأرشفة لهذه الصفحة.

ثانيًا الـ Canonical tags:

إن علامات الـ Canonical tags هى العلامات التي تتعرف عليها عناكب الزحف في حالة تفضيل صفحة محددة لا يوجد بها علامة أساسية، تتعرف عليها العناكب الـ Googlebot على أنها الصفحة المفضلة والإصدار الوحيد من تلك الصفحة ويقوم بفهرستها.

لكن إذا كانت الصفحة تحتوي على علامة أساسية، تفترض عناكب الزحف الـ Googlebot أن هناك نسخة مفضلة بديلة لتلك الصفحة ولن يقوم بفهرسة هذه الصفحة.

لذلك إذا أردت التَحقُق يمكن استخدام أداة فحص عنوان URL من  Google Search Console للتحقق من العلامات الأساسية، لكن في هذه الحالة سوف ترى تحذيرًا نصه “Alternate page with canonical tag – صفحة بديلة بعلامة أساسية”.

التأكد من بنية الروابط الداخلية لموقعك

يساعد الربط الداخلي عناكب الزحف في اكتشاف صفحات موقعك، كما تُعرف الصفحات غير المرتبطة ببعضها داخليًا باسم “الصفحات الفقيرة” ونادرًا ما تتم فهرستها.

كما يتم التأكد من بنية الروابط الخاصة بموقعك حيث تضمن بنية الموقع المناسبة سرعة في الأرشفة، وتعتبر التأكد من صحة الارتباط الداخلي وآلية عمل خريطة الموقع شيء ضروري، حيث تحدد خريطة موقع XML كل المحتوى الموجود على موقعك الإلكتروني، مما يسمح لك بتحديد الصفحات غير المرتبطة.

كما يمكنك الربط داخليًا بين الصفحات من خلال الطرق الآتية:

• إضافة روابط داخلية ذات صلة بموضوع الصفحة.
• استهداف الربط الداخلي في الصفحات عالية الترتيب بصفحات جديدة.

الاهتمام بكتابة محتوى عالي الجودة

يُعد المحتوى عالي الجودة من أكثر الأمور الهامة التي يمكنها أن تُساعد المواقع في الأرشفة والتصنيف. ويمكنك التأكد من محتوى موقعك عالي الجودة، وتحديث الصفحات المنخفضة الجودة والقيمة الضعيفة.

وذلك بسبب تركيز عناكب البحث أو الـ Googlebot على الصفحات الأكثر قيمة على موقعك الإلكتروني، لذا يجب أن يكون المحتوى فريدًا ذات قيمة عالية للمُستخدم.

ما هو الوقت الذي تستغرقه Google لفهرسة الموقع؟

قد يستغرق Google بضعة أيام أو بضعة أسابيع لفهرسة الموقع، لكن لا تُحبط. حيث تواجدت خطوات يمكنك اتخاذها من أجل فهرسة أكثر كفاءة.

كما تُعتبر أسهل طرق فهرسة المواقع في جوجل هي طلب الفهرسة من خلال Google Search Console…

حتى تقوم بذلك قم بالخطوات التالية:

• انتقل إلى أداة فحص عنوان URL في Google Search Console. 
• الصق عنوان URL الذي تريد أرشفته في شريط البحث.
• انتظر حتى يتحقق Google من عنوان URL. 
• إذا لم يكن عنوان URL مفهرسًا، فانقر على زر “طلب الفهرسة”.

كيف تَتَحقق من فهرسة الموقع؟

إضافة موقعك في محرك البحث جوجل أمراً سهل ويمكنك التحقق من الفهرسة كما يلي:

• انتقل إلى محرك بحث Google.
• في شريط بحث Google، اكتب “Site:domain.com”.
• عندما تنظر أسفل شريط البحث، سوف ترى صفحات نتائج Google “الكل” و “الصور” و “الأخبار” وما إلى ذلك. 
• أسفل هذه العناصر مباشرة سوف ترى عددًا تقديريًا لـ صفحات الموقع التي فهرستها Google، إذا لم تظهر أي نتائج، فلن تتم فهرسة الصفحة.

على سبيل المثال: 

التحقق من صفحات موقع أمازون:

• كتابة (site:https://www.amazon.com) في محرك بحث Google.
• سوف يظهر لك بعدها في نتيجة البحث كل صفحات أمازون.

متى يتمّ إزالة صفحات الويب من فهارس محرّكات البحث؟

يُمكن أن يتم إزالة صفحات موقعك من  من فهرس محرّكات البحث لعدّة أسباب مثل: 

1- الأخطاء Errors

إذا قامت عناكب البحث باكتشاف رابط صفحة معيّنة بخطأ “Not Found” أو (404) أو الصفحات التي لا تستجيب بسبب أخطاء الاستضافة الـ Server Errors أو أخطاء الـ (5XX).

2- إضافة وسم الـ No index 

عند إضافة وسم أو الـ No index Tag في بعض الأحيان يمكن أن يضر الموقع خاصة إذا كان هذا الوسم من قبل يأتي بزيارات للموقع وبالفعل مؤرشفة في جوجل، فعند إخبار محرّك البحث بتجاهل هذه الصفحة وعدم فهرستها، سوف يتم إزالتها بالفعل من محركات البحث.

3- التعرض لعقوبات جوجل

إذا حدث خروج عن المعايير المُخصصة من إدارة محرّكات البحث، سوف يتمّ فرض عقوبات على موقعك الإلكتروني أو الصفحة المخالفة بموقعك، ثم يتمّ إزالتها من فهرس محركات البحث.

4- حظر عناكب البحث من الوصول لصفحة محددة

إذا لم تتمكن عناكب البحث من الوصول لصفحة محددة مثل الصفحات التي تطلب كلمة السر أو صفحات تعبئة الطلبات سوف تقوم بتجاهلها وتقوم بإزالتها من محركات البحث.

بذلك نكون انتهيت من حديثي معكم عن الأرشفة أو الفهرسة Indexing وعلاقتها بتحسين محركات البحث، كما يمكنك معرفة العديد من إجابات الأسئلة التي تَتعلق بـ تحسين محرّكات البحث.

وإذا لديك موقع إلكتروني وترغب تحسين أرشفته في محركات البحث لمضاعفة زيارته التواصل معنا.