يعرف كل مشرفي المواقع ذلكبدأ الناس في الوصول إلى المورد من محركات البحث ، فهرستها ضرورية. سنتحدث عن ماهية فهرسة الموقع ، وكيف يتم تنفيذه ، وما معنى ذلك ، في هذه المقالة.
لذا فإن كلمة "الفهرسة" في حد ذاتها تعنيالدخول في سجل شيء ، تعداد المواد المتاحة. ينطبق نفس المبدأ على فهرسة الموقع. في الواقع ، يمكن أيضًا تسمية هذه العملية بإدخال معلومات حول موارد الإنترنت في قاعدة بيانات محركات البحث.
وبالتالي ، بمجرد أن المستخدم هوأدخل العبارة التالية في حقل بحث Google ، سيعود البرنامج النصي بنتيجة إليها ، بما في ذلك عنوان موقعك ووصفه الموجز ، الذي نراه أدناه.
فهرسة نفسها (ياندكس ، أو جوجل - الأدوارلا يلعب) بسيط جدا. يتم مسح شبكة الإنترنت بأكملها ، التي تركز على قاعدة عناوين IP التي تملكها محركات البحث ، بواسطة روبوتات قوية - "العناكب" التي تجمع معلومات عن موقعك. يحتوي كل محرك بحث على عدد كبير منهم ، ويعملون تلقائيًا على مدار الساعة. مهمتهم هي الانتقال إلى موقعك و "قراءة" جميع المحتويات الموجودة عليه ، أثناء إدخال البيانات في قاعدة البيانات.
لذلك ، من الناحية النظرية ، فهرسة الموقع ليست كافيةيعتمد على صاحب المورد. العامل الحاسم هنا هو روبوت البحث الذي يزور الموقع ويستكشفه. هذا هو ما يؤثر على سرعة ظهور موقعك في نتائج البحث.
بالطبع ، من المفيد لكل مشرفي المواقع أنظهر المورد في نتائج البحث في أسرع وقت ممكن. سيؤثر هذا ، أولاً ، في توقيت انسحاب الموقع إلى المراكز الأولى ، وثانياً ، عندما تبدأ المراحل الأولى من تسييل الموقع. وبالتالي ، كلما أسرع الروبوت البحث "يأكل" جميع صفحات المورد الخاص بك ، كان ذلك أفضل.
كل محرك بحث له خوارزمية خاصة به.إدخال البيانات حول المواقع في قاعدة البيانات الخاصة بك. على سبيل المثال ، تتم فهرسة الصفحات في Yandex على مراحل: تقوم برامج الروبوت بالزحف إلى المواقع باستمرار ، ثم تنظيم المعلومات ، وبعدها يحدث التحديث المزعوم ، عندما تسري جميع التغييرات. لا تحدد الشركة انتظام مثل هذه الأحداث: فهي تعقد كل 5-7 أيام (كقاعدة عامة) ، ومع ذلك ، يمكن أن تحدث في كل من 2 و 15 يومًا.
في الوقت نفسه ، تختلف فهرسة الموقع في Googleنموذج. في نظام البحث هذا ، يتم الاحتفاظ بهذه "التحديثات" (تحديثات قاعدة البيانات) بانتظام ، وفي هذا الصدد ، ليس من الضروري الانتظار في كل مرة تدخل فيها الروبوتات المعلومات في قاعدة البيانات ، ثم سيتم طلبها مرة كل بضعة أيام.
بناءً على ما سبق ، يمكننا القيام بما يليالخلاصة: تتم إضافة الصفحات في Yandex بعد تحديث أو تحديثين (أي في غضون 7-20 يومًا في المتوسط) ، وعلى Google يمكن أن يحدث ذلك بشكل أسرع - حرفيا في يوم واحد.
في هذه الحالة بالطبع كل محرك بحثهناك خصوصيات لكيفية إجراء الفهرسة. ياندكس ، على سبيل المثال ، لديها ما يسمى "سرعة العمل" - روبوت يمكنه إدخال البيانات في النتائج في غضون ساعات قليلة. صحيح أن الانتقال إلى مواردك ليس بالأمر السهل: يتعلق هذا بالأساس بالأخبار ومختلف الأحداث البارزة التي تتطور في الوقت الفعلي.
الجواب على سؤال حول كيفية إدخال بيانات عنكالموقع في فهرس محركات البحث بسيط ومعقد. تعد فهرسة الصفحات ظاهرة طبيعية ، وإذا لم تفكر فيها حتى ، ولكن ببساطة ، احتفظ بمدونتك ، وقم بملئها تدريجيًا بالمعلومات ، فإن محركات البحث سوف "تبتلع" المحتوى الخاص بك بمرور الوقت.
شيء آخر هو عندما تحتاج إلى تسريعفهرسة صفحة ، على سبيل المثال ، إذا كانت لديك شبكة تسمى "الأقمار الصناعية" (المواقع المصممة لبيع الروابط أو الإعلانات ، والتي تكون جودتها أسوأ ، كقاعدة عامة). في هذه الحالة ، من الضروري اتخاذ تدابير حتى تلاحظ الروبوتات موقعك. يعتبر ما يلي أمرًا شائعًا: إضافة عنوان URL لموقع ويب إلى نموذج خاص (يطلق عليه "AddUrl") ؛ تشغيل عنوان مورد من خلال أدلة الارتباط ؛ إضافة عناوين إلى دلائل الإشارات المرجعية وغير ذلك الكثير. كيف يعمل كل من هذه الأساليب ، هناك العديد من المناقشات في منتديات SEO. كما تظهر الممارسة ، تعد كل حالة فريدة ، ومن الصعب العثور على أسباب فهرسة أحد المواقع في غضون 10 أيام والآخر في شهرين.
ومع ذلك ، فإن المنطق الذي يمكنكلجعل فهرس الموقع أسرع ، بناءً على موضع الروابط إليه. على وجه الخصوص ، نحن نتحدث عن تعيين عنوان URL على مواقع مجانية ومتاحة للجمهور (الإشارات والأدلة والمدونات والمنتديات) ؛ حول شراء الروابط على المواقع الكبيرة والشائعة (باستخدام تبادل Sape ، على سبيل المثال) ؛ بالإضافة إلى إضافة ملف sitemap إلى نموذج addURL. قد تكون هناك طرق أخرى ، ولكن تلك التي تم سردها بالفعل يمكن أن يطلق عليها بأمان الأكثر شعبية. أذكر ، بشكل عام ، كل هذا يتوقف على الموقع وحظ صاحبه.
بحسب الموقع الرسمي لجميع محركات البحثالأنظمة ، يشمل الفهرس المواقع التي تمر بسلسلة من المرشحات. ما متطلبات هذا الأخير ، لا أحد يعرف. من المعروف فقط أنه بمرور الوقت ، يتم تحسينها جميعًا بطريقة تتخلص من المواقع الزائفة التي تم إنشاؤها لكسبها من بيع الروابط والموارد الأخرى التي لا تحمل معلومات مفيدة للمستخدم. بالطبع ، بالنسبة لمنشئي هذه المواقع ، تتمثل المهمة الرئيسية في فهرسة الصفحات قدر الإمكان (لجذب الزوار وبيع الروابط وما إلى ذلك).
بناءً على المعلومات السابقة ، يمكنك القيام بذلكالاستنتاج حول المواقع التي من المحتمل ألا تقع في نتائج البحث. يتم التعبير عن نفس المعلومات من قبل الممثلين الرسميين لمحركات البحث. أولاً ، هذه مواقع تحتوي على محتوى غير فريد يتم إنشاؤه تلقائيًا ولا يكون مفيدًا للزوار. ويتبع ذلك الموارد التي يتم فيها إنشاء الحد الأدنى من المعلومات لبيع الروابط وما إلى ذلك.
صحيح ، إذا قمت بتحليل نتائج البحثأنظمة ، ثم يمكنك العثور على كل هذه المواقع. لذلك ، إذا تحدثنا عن المواقع التي لن تكون موجودة في SERP ، فيجب ملاحظة ليس فقط المحتوى غير الفريد ، ولكن أيضًا عدد من العوامل الأخرى - الكثير من الروابط ، وهيكل منظم بشكل غير صحيح وما إلى ذلك.
تزحف محركات البحث إلى كل المحتوى ،تقع على الموقع. ومع ذلك ، هناك تقنية يمكنك من خلالها تقييد وصول روبوتات البحث إلى قسم معين. يتم ذلك باستخدام ملف robots.txt ، الذي تستجيب إليه عناكب محرك البحث.
إذا وضعت هذا الملف في جذر الموقع ،ستتم فهرسة الصفحات وفقًا للنص المكتوب فيه. على وجه الخصوص ، يمكنك تعطيل الفهرسة باستخدام أمر واحد - Disallow. بالإضافة إلى ذلك ، في الملف ، يمكنك أيضًا تحديد أقسام الموقع التي سينطبق عليها هذا الحظر. على سبيل المثال ، لمنع دخول الموقع بالكامل إلى الفهرس ، يكفي تحديد شرطة مائلة واحدة "/" ؛ ومن أجل استبعاد قسم "المتجر" من المخرجات ، يكفي الإشارة إلى الخاصية التالية في ملفك: "/ shop". كما ترى ، كل شيء منطقي وبسيط للغاية. يتم إغلاق صفحات الفهرسة بسهولة بالغة. في الوقت نفسه ، تنتقل برامج الروبوت للبحث إلى صفحتك ، وتقرأ ملف robots.txt ولا تدخل البيانات في قاعدة البيانات. لذلك يمكنك التلاعب بسهولة لرؤية في البحث عن تلك أو الخصائص الأخرى للمواقع. الآن دعونا نتحدث عن كيفية فحص الفهرس.
هناك عدة طرق لمعرفة كموأي الصفحات موجودة في قاعدة بيانات Yandex أو Google. الأول - أسهل - هو إدخال الاستعلام المناسب في نموذج البحث. يبدو مثل هذا: site: domen.ru ، حيث تكتب عنوان موقعك بدلاً من domain.ru ، وفقًا لذلك. عندما تقدم مثل هذا الطلب ، سيعرض محرك البحث جميع النتائج (الصفحات) الموجودة على عنوان URL المحدد. علاوة على ذلك ، بالإضافة إلى سرد جميع الصفحات ، يمكنك أيضًا رؤية العدد الإجمالي للمواد المفهرسة (على يمين عبارة "عدد النتائج").
الطريقة الثانية هي التحقق من الفهرسةصفحات باستخدام خدمات متخصصة. هناك عدد كبير منهم الآن ، دون شك يمكنك الاتصال بـ xseo.in و cy-pr.com. على هذه الموارد ، لا يمكنك فقط رؤية العدد الإجمالي للصفحات ، ولكن أيضًا تحديد جودة بعضها. ومع ذلك ، فأنت لا تحتاج هذا إلا إذا كنت على معرفة أكثر تعمقًا بهذا الموضوع. هذه عادة أدوات SEO احترافية.
أود أيضا أن أكتب قليلا عن ما يسمىالفهرسة "الإجبارية" ، عندما يحاول شخص دفع موقعه إلى الفهرس باستخدام طرق "عدوانية" مختلفة. لا يوصي المُحسِّنون بذلك.
محركات البحث على الأقل تلاحظ الإفراطقد يخضع النشاط المرتبط بمورد جديد لبعض العقوبات التي تؤثر سلبًا على حالة الموقع. لذلك ، من الأفضل القيام بكل شيء بحيث تبدو فهرسة الصفحات عضوية قدر الإمكان ، تدريجية وسلسة.