فایل robots.txt وردپرس

سلام دوستان اگه تو مبحث سئو مطالعه کردین باشین احتمالا واژه robots.txt خیلی به گوشتون خورده! اما robots.txt چیه ؟! این فایل در واقع مدیریت کننده کرولرهای مراجعه کننده به وبسایت شماست.(کرولر یا خزنده در واقع چیزی که به نمایندگی از موتور جستجو هست…

این مطلب توسط محمد امین فاطمی مهر در تاریخ ۰۴ ام دی ۱۳۹۳ارسال شده است.

جهت مطالعه فایل robots.txt وردپرس به سمت پایین اسکرول کنید.

فایل robots.txt وردپرس

سلام دوستان اگه تو مبحث سئو مطالعه کردین باشین احتمالا واژه robots.txt خیلی به گوشتون خورده! اما robots.txt چیه ؟! این فایل در واقع مدیریت کننده کرولرهای مراجعه کننده به وبسایت شماست.(کرولر یا خزنده در واقع چیزی که به نمایندگی از موتور جستجو هست که وارد سایت شما میشه و در تمام سایتتون میخزنه و به قول معروف سایتتون رو کلی بالا و پایین میکنه و مثلا وارد لینک ها میشه یا میاد و تو صفحتون میگرده و خلاصه هرچیزی که به موتورهای جست و جو کمک میکنه رو از وبسایتتون میخونه) فایل robots.txt در اصل دروازه ورود سایت شما برای این کرولرهاست. در واقع وقتی یک کرولر مثلا کرولر گوگل وقتی میخواد بیاد تو یکی از صفحات شما اول میره و محتویات فایل robots.txt رو میخونه و بعد طبق اون وارد قسمت های مجاز برای خزش میشه و وارد قسمت های غیرمجاز برای خزش نمیشه.
پس این فایل همونطور که دیدین یه جورایی حیاتی محسوب میشه تا در واقع به کرولرها کمک کنه تا هم بهتر تو سایتتون بخرند و هم اینکه خیلی فضولی نکنند! 🙂

فایل robots.txt وردپرس

اما خیلی از ما نمیدونیم چه محتوایی در این فایل قرار بدیم و در واقع با چه مضمونی ایجادش کنیم . من برای حل این مشکل در اینجا محتوایات یک فایل robots.txt خوب رو براتون قرار میدم که به وسیله اون برای سایت وردپرسیتون این فایل رو ایجاد کنید:

sitemap: http://blog.bitfa.net/sitemap.xml
User-agent:  *
# disallow all files in these directories
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/
Disallow: /archives/
disallow: /*?*
Disallow: *?replytocom
Disallow: /wp-*
Disallow: /author
Disallow: /comments/feed/
User-agent: Mediapartners-Google*
Allow: /
User-agent: Googlebot-Image
Allow: /wp-content/uploads/
User-agent: Adsbot-Google
Allow: /
User-agent: Googlebot-Mobile
Allow: /

خوب در آخر هم چند تا نکته کوچیک درباره عبارات بالا :
1- Disallow کرولر رو از خزش در اون قسمت منع میکنه(برای مسائل امنیتی و جلوگیری از فضولی زیاد کرولرها این کار ضروریه)
2- Allow قسمت های مجاز برای خزش کرولر رو مشخص میکنه
3- sitemap هم آدرس سایت مپ سایت شما رو مشخص میکنه که من http://blog.bitfa.net/sitemap.xml رو جلوش قرار دادم.(شما هم آدرس سایت مپ خودتون رو توش بذارین.)
در آخر هم بعد از ساخت robots.txt با محتویاتی که گفته شد اونو تو محل نصب سایتتون(همون جایی که homepage تون اونجاست) آپلود کنید.
امیدوارم این پست براتون مفید بوده باشه و به کارتون بیاد. یاعلی

ساير مطالبي که شايد از خواندن آنها لذت ببريد!

مطالبي که در ذيل مشاهده ميکنيد نزديک ترين مطالب از لحاظ محتوايي به مقاله اي است که آنرا مطالعه کرديد...

آخرین نظرات خوانندگان این مطلب

نظرات شما برای ما ارزشمند است.پس نظرات زیبای خود را با ما در میان بگذارید...

  1. گردشگری گفت:

    ممنون از مطلب مفیدتون…واقعا وبلاگ عالی دارین.

    شما هم نظر بدهید...

    معادله امنیتی(با عدد جای خالی را پر کنید نه با حروف!) * Time limit is exhausted. Please reload the CAPTCHA.

سلام.وبسایت خیلی خوب و جامعی دارید.ممنون...

تدریس کنکور

For the reason that the admin of this web page is working, no question very rapidly it will be famous, due to...

.

سلام.ممنون .خیلی خوب بود.از دست اندرکاران وبسایت به این خوبی سپاسگزارم...

تفریحی فان تو فان

در خبرنامه بیتفا عضو شوید!

با عضویت در بیتفا، آخرین نوشته‌های بیتفا، پیشنهادهای ویژه و برخی مطالب آموزشی را در ایمیل خود دریافت کنید.

پربازدید ها

ما را در شبکه های اجتماعی دنبال کنید...

طراحی و کدنویسی این سایت تماما با تیم بیتفا بوده و هرگونه کپی برداری حرام بوده و مورد رضایت ما نمی باشد. جهت خرید قالب تماس بگیرید.

09370245225

b i t f a c o @ g m a i l . c o m

هورا ! اگه ایمیلهای خوشمزه آموزشی دوست داری ، همین الان تو خبرنامه عضو شو!

با عضویت در خبرنامه ما شما به راحتی در ایمیلتون میتونید آخرین مقالات بیتفا را مشاهده کنید علاوه بر این که به اعضای خبرنامه بعد از مدتی هدایای مبتنی بر وب ارزشمندی تعلق میگیره که قطعا شگفت زده خواهید شد!