شرح ملف Robots.txt

شرح ملف Robots.txt

إن الفهم الجيد لملف Robots.txt سيمكنك من قطع شوط طويل في تهيئة موقعك لمحركات البحث. في هذا الدليل سنتعرف على ما هو  Robots.txt شرح استخدامه في ووردبريس بالشكل الصحيح. بشكل عام يتم إنشاء robots.txt من أجل برامج الروبوتات لمواقع مثل محرك البحث Google (ومحركات البحث الأخرى), وهي عبارة عن برامج تتبع تقوم بالزحف إلى ملفات…