القائمة الرئيسية

الصفحات

الدرس (4) طريقة *انشاء خريطة Sitemap و ملف Robot txt*


الدرس (4) طريقة *انشاء خريطة Sitemap و ملف Robot txt*

ملف robots.txt هو ملف نصي صغير موجود في مجلد الجذر الخاص بموقعك. يخبر محرك البحث هذا برامج الروبوت بأي جزء من الموقع يجب الزحف إليه وفهرسته وأي جزء لا تريده.

إذا ارتكبت أي خطأ طفيف أثناء تعديله / تخصيصه ، فسيتوقف محرك البحث عن الزحف إلى موقعك وفهرسته ولن يكون موقعك مرئيًا في نتائج البحث.

Robots.txt هو ملف نصي بسيط يتم وضعه في جذر موقع الويب الخاص بك. يخبر برامج زحف الويب مثل Googleboot ما إذا كان يجب عليهم الزحف إلى ملف أم لا.

يعد ملف robots.txt وروبوت محرك البحث جوانب أساسية لكيفية عمل محركات البحث. يتحكم هذا الملف في كيفية زحف عناكب محرك البحث إلى صفحاتك. استخدامه بشكل غير صحيح يمكن أن يضر رتبتك. لذلك ، يجب أن تعرف المزيد عن ملف robots.txt بالتفصيل.



الدرس (4) طريقة *انشاء خريطة Sitemap و ملف Robot txt*

كيفية استخدام ملف robots.txt؟

عندما يتعلق الأمر بملف robots.txt ، يوجد أربعة أشياء مهمة يجب على أي مشرف موقع أو مدون القيام به.
  1. تأكد من أن موقع الويب الخاص بك يحتوي على ملف robots.txt أم لا.
  2.  موقع الويب الخاص بك يحتوي على هذا ، فتأكد من أنه لا يمنع ترتيبك أو المحتوى الذي لا تريد حظره.
  3. حدد ما إذا كنت بحاجة إلى ملف robots.txt.
  4. حظر الصفحات التي تحتوي على robots.txt والتي لا تريد الزحف إليها بواسطة محركات البحث.

لماذا موقع الويب robots.txt مطلوب:

عندما تأتي روبوتات محرك البحث إلى مواقع الويب والمدونات ، فإنها تتبع ملف الروبوتات وتزحف إلى المحتوى. ولكن لن يحتوي موقعك على ملف Robots.txt ، لذلك سيبدأ محرك البحث  في الفهرسة ويزحف إلى كل محتوى موقعك الإلكتروني الذي لا تريد فهرسته.

محرك البحث  يبحث في ملف الروبوتات قبل فهرسة أي موقع. عندما لا يحصلون على أي تعليمات من ملف Robots.txt ، يبدأون بفهرسة جميع محتويات الموقع. وإذا حصلت على أي تعليمات ، فيتم بفهرسة الموقع باتباعها.

مزايا ملف robots.txt:

يخبر محرك البحث أي جزء من الموقع يجب الزحف إليه وفهرسته وأي جزء لا تريده.
يمكن منع فهرسة ملف معين أو مجلد أو صورة أو pdf وما إلى ذلك في محرك البحث.
في بعض الأحيان ، تقوم برامج زحف محركات البحث بالزحف إلى موقعك مثل الأسد الجائع ، مما يؤثر على أداء موقعك. ولكن يمكنك التخلص من هذه المشكلة عن طريق إضافة تأخير الزحف إلى ملف الروبوتات الخاص بك. لكن Googlebot لا يطيع هذا الأمر. ولكن يمكنك تعيين معدل الزحف في Google Search Console. هذا يحمي خادمك من التحميل الزائد.
يمكنك خصوصية القسم بأكمله من أي موقع ويب.
يمكن أن تمنع نتائج البحث الداخلية ظهور الصفحات في موقعك.
يمكنك تحسين SEO لموقع الويب الخاص بك عن طريق حجب الصفحات منخفضة الجودة.

ما هو ملف Sitemap في تحسين, محركات البحث وفوائده :

يمكن أن يؤدي استخدام خريطة مواقع إلى إحداث تأثير إيجابي على موقع الويب الخاص بك. يساعد على إنشاء روبوتات محرك البحث للزحف إلى موقعك وفهرسته بسهولة أكبر. 

وبالتالي ، فإنه سيحسن رؤية صفحات الويب الخاصة بك في محركات البحث.

يعمل ملف Sitemap على تحسين الزحف إلى موقعك ويساعد محركات البحث في الزحف إلى موقعك على الويب بشكل أفضل.

ملف Sitemap هو ملف XML يحتوي على جميع الروابط إلى موقع الويب الخاص بك. هذا هو هيكل الموقع. بمساعدة ملف sitemap ، يمكننا إخبار محرك البحث بعدد الفئات الموجودة على موقعنا ، وعدد المقالات الموجودة في هذه الفئات وما هو عنوان URL للمقالات. من خلال القيام بذلك ، فإن محرك البحث يكون من السهل جدًا الزحف إلى موقع الويب وبالتالي نستفيد من الترتيب.

1. ملف Sitemap:

تم إنشاء ملف sitemap هذا لمستخدم. بمساعدة خريطة الموقع هذه ، يمكن لزائر الموقع الانتقال بسهولة من صفحة إلى أخرى.

أمثلة

افترض أن مستخدمًا ينتقل إلى موقع ويب. إذا كان هناك عدد كبير جدًا من الصفحات على هذا الموقع ، فسيكون المستخدم في حيرة من أمره. إذا لم يكن موقع الويب منظمًا بشكل جيد ، فقد يكون من الصعب جدًا الانتقال من صفحة إلى أخرى. هذا هو السبب في استخدام خريطة الموقع .

يحتوي ملف  Sitemap على روابط داخلية إلى موقع الويب بأكمله. كما أنه يساعد في ترتيب موقعنا .

2. خريطة موقع :

يستخدم ملف sitemap هذا نوعًا خاصًا من الترميز. هذا الترميز مستحيل على الإنسان فهمه.

باستخدام هذا الترميز ، يمكن إخبار محرك البحث بعدد الصفحات الموجودة على الموقع. بهذه الطريقة ، إذا كان موقعنا يزحف ، فإن فرصة فقدان صفحة موقع الويب تكون أقل. كما أنه يوفر وقت محرك البحث.

فوائد امتلاك ملف Sitemap:

عندما نتحدث عن خريطة الموقع ، لا يمكننا نسيان فوائدها. سيساعدك هذا كثيرًا في ترتيب تحسين محركات البحث.

 مزايا ملف Sitemap:

التغييرات في المحتوى - تمنح Google الأولوية القصوى للمحتوى عالي الجودة. من الممارسات الشائعة إضافة جهة اتصال جديدة إلى المدونة وإجراء تغييرات على جهة الاتصال القديمة. لهذا السبب نحافظ على ترتيب موقعنا. بمساعدة ملف sitemap ، يحصل محرك البحث على إشارة تغيير في المدونة. لهذا السبب تأتي برامج زحف الويب إلى موقع الويب بسرعة.
الزحف الفعال - يحتوي ملف Sitemap على جميع معلومات موقع الويب مثل عدد الصفحات الموجودة على موقع الويب وعدد الفئات الموجودة وعنوان URL الخاص بها. إضافة خريطة الموقع تجعل من السهل على محركات البحث الزحف إلى موقعنا. هذا هو السبب في أننا نستفيد في تحسين محركات البحث.
البحث قريبًا - الغرض من إنشاء المحتوى الخاص بك هو البحث في محرك البحث في أقرب وقت ممكن. يمكن أن يساعدك ملف Sitemap كثيرًا في هذا الأمر.
وفر الوقت الثمين - هناك بعض هذه المحتويات - يجب أن يتم الزحف إلى الأخبار بشكل جديد. من الصعب جدًا معرفة متى سيأتي زاحف موقع الويب. لذا ستؤدي إضافة ملف sitemap إلى حل هذه المشكلة.
خدمة مجانية - أشياء مجانية تجذب الجميع. إنشاء ملف sitemap هو أيضًا خدمة مجانية يجب على الجميع القيام بها. إرسال ملف sitemap إلى محرك البحث مجاني أيضًا.

ما هي علامات رؤوس مخصصة لبرامج الروبوت في Blogger؟

داخل إعدادات Blogger يوجد في اسفل علامات رؤوس مخصصة لبرامج الروبوت ، سيكون لديك الخيارات التالية التي سأضيفها هنا.

all : إذا حددت هذا الخيار لصفحة في Blogger ، فهذا يعني عدم وجود قيود على برامج الروبوت للزحف والفهرسة إلى تلك الصفحة. هذه أيضًا قيمة افتراضية لجميع الصفحات والمشاركات داخل Blogger ، إذا لم تقم بتمكين هذا الخيار.

Noindex : هذا ما نريده باستخدام علامات رؤوس مخصصة ، ولكن خطأ تحديد هذا الخيار يمكن أن يختفي مدونتك من محركات البحث. إذا اخترت "noindex" في أي صفحة في Blogger ، فلن تتمكن الروبوتات من الزحف إلى هذه الصفحة وفهرستها. هذا يعني أنك لن ترى هذه الصفحة في محركات البحث.

Nofollow : تتيح لك الحصول على مشاركة تحتوي على روابط داخلية وخارجية. بشكل افتراضي ، سيتبع زاحف Google كل الروابط داخل مشاركاتك ويفكر في الترتيب. إذا كنت لا ترغب في متابعة الرابط الخاص بك في صفحة معينة أو منشور معين ، فما عليك سوى إضافة علامة وصفية لعلامة الروبوت nofollow على تلك الصفحة أو حدد هذا الخيار في Blogger.

none : هذا يعني أنك تختار كلا من "noindex" و "nofollow".

noarchive : سيؤدي تحديد هذا الخيار إلى إزالة الارتباط "المخزن مؤقتًا" من البحث.

nosnippet : سيؤدي ذلك إلى إزالة المقتطف (الوصف التعريفي) من صفحات نتائج البحث.

noodp : سيؤدي تحديد هذا الخيار إلى إزالة البيانات الوصفية (العنوان أو المقتطف) من مشاريع الدليل المفتوح مثل DMOZ.

notranslate : سيطلب من العناكب عدم عرض الترجمة إلى صفحات محركات البحث.

noimageindex : إذا تم تحديد هذا الخيار ، فستظل مشاركتك في نتائج البحث ولكن الصور الموجودة في تلك الصفحة لن تظهر في البحث.

unavailable_after : لديك أيضًا خيار عدم فهرسة صفحة بعد وقت محدد.


Azooz Tech

تَسْتَطِيعُ مُشَاهَدَة هَذَا الْفِيدْيُو الَّذِي يَشْرَحُ عَمَلِيَّةُ *إنْشَاءِ خريطة Sitemap و ملف Robot txt*

Azooz Tech



أشكركم على تخصيص, بعض الوقت لقراءة هذا المقال حتى النهاية! يرجى زيارتنا مرة أخرى ..

ألم ترى مدى سهولة, *انشاء خريطة Sitemap و ملف Robot txt*

Azooz Tech
هل اعجبك الموضوع :

تعليقات

جدول التنقل