کد تخفیف فوق العاده 15% برای تمام محصولات حلقه وردپرس فقط برای خرید اول !

firstsale

چراحلقه وردپرس

تفاوت ما

محصولاتی با کیفیت و اختصاصی با فروش آسان و سریع و نصب و اجرای دقیق توسط پشتیبانان حلقه وردپرس با تخفیفات ویژه باعث خواهد شد حلقه وردپرس تفاوت ایجاد کند

پشتیبانی حرفه ای

با تغییر کادر پشتیبانی حلقه وردپرس ، پشتیبانی به سه روش مختلف از طریق تیکت با پاسخگویی کمتر از 24 ساعت و تلفنی و تلگرامی انجام می گیرد و نگرانی بابت خدمات محصولات نخواهید داشت

قالب ووکامرس پرستور
قالب ووکامرس پرشنگ
قالب ووکامرس استوریکا
ایجاد و بهینه سازی فایل robots.txt

ایجاد و بهینه سازی فایل robots.txt

(آخرین بروزرسانی در : تیر ۲, ۱۳۹۴)

فایل robots.txt اولین فایلی است که هر روبات در هنگام ورود به سایت با آن برخورد می‌کند. این فایل بایدها و نبایدهای سایت را به ربات منتقل می‌کند و به طور کلی مسیر حرکت در سایت را به ربات جستجوگر نشان می‌دهد. در این مطلب از حلقه وردپرس نکات کاربردی و روش‌هایی برای بهینه سازی این فایل را به شما معرفی می‌کنیم که قطعا در سئو بهتر سایت شما تاثیر خواهند داشت. با ما همراه باشید…

ضرورت ایجاد فایل robots.txt

در صورت عدم وجود فایل ربات در ریشه هاست ، موتورهای جستجوگر قادر به بررسی و ایندکس سایت نخواهند بود. از طرفی اکر نقشه وب‌سایت خود را در موتورهای جستجوگر ثبت کنید، بدون نیاز به فایل  robots.txtمطالب ایندکس می‌شوند. حساب کنید، چند موتور جستجوگر را نمی‌شناسید؟ چند موتور جستجوگر پس از تاسیس سایت شما شروع به کار می‌کنند؟  در این موارد شما سایت خود را در آن‌ها ثبت نکرده و طبیعتا مسیر فایل نقشه سایت را هم در آن‌ها تعیین نکرده‌اید. پس عملا روبات‌های این موتورها، مطالب سایت شما را ایندکس نخواهند کرد و این یک ضرر بزرگ است که به خاطر کوتاهی شما به سایت وارد می‌شود.

اگر هنوز آن را نساخته‌اید، یک فایل با نام robots.txt در ریشه هاست سایت ایجاد کنید. یعنی مسیر فایل به شکل “www.yourdomain.com/robots.txt” خواهد بود.

پیکربندی و ساخت فایل robots.txt

ساخت و نوشتن کد در این فایل بسیار ساده است. برای این کار در خط اول، عبارت User-Agent را برای معرفی ربات‌های مورد نظر خود وارد کنید. در مقابل آن نام ربات‌های در نظر گرفته شده را بنویسید(برای مثال  Googlebot , Bingbot و…). در صورت وارد کردن “*” ، این فایل تمام ربات‌های متصل شونده به سایت را مورد خطاب قرار خواهد داد.

در خطوط بعد با استفاده از دستورات Allow و Disallow، به ترتیب صفحاتی که تمایل به ایندکس آن‌ها داریم و صفحاتی که تمایل به ایندکس آن‌ها نداریم را معرفی می‌کنیم. برای مثال یک مورد ساده برای محتویات فایل ربات به صورت زیر است:

User-Agent: *
Allow: /wp-content/uploads/
Disallow: /wp-content/plugins/
Disallow: /readme.html

سئو و بهینه سازی فایل robots.txt با معرفی نقشه سایت

معمولا آدرس نقشه سایت به صورت اتوماتیک توسط افزونه‌های سئو سایت به فایل robots.txt اضافه می‌شود. در غیر این صورت برای اضافه کردن آن به صورت دستی می‌توانید از کد زیر استفاده کنید(به جای “http://www.example.com/sitemap.xml” آدرس نقشه سایت را درج کنید):

Sitemap: http://www.example.com/sitemap.xml

یک فایل robots.txt ایده‌آل به چه صورت است؟

کد زیر یک فایل robots.txt ساده را نشان می‌دهد که اکثر سایت‌ها نیز به همین صورت فایل روبات خود را پیکربندی می‌کنند:

User-agent: *
Disallow:

Sitemap: http://www.example.com/sitemap.xml

این کد ساده به ربات‌ها اجازه دسترسی به تمام لینک‌های معرفی شده در نقشه سایت را می‎‌دهد.

در زیر نیز یک مورد فایل ربات قرار گرفته که از تمام عناصر استفاده و robots.txt نسبتا جامعی را ایجاد کرده است:

User-Agent: *
Allow: /?display=wide
Allow: /wp-content/uploads/
Disallow: /wp-content/plugins/
Disallow: /readme.html
Disallow: /refer/

Sitemap: http://www.sample.com/post-sitemap.xml
Sitemap: http://www.sample.com/page-sitemap.xml
Sitemap: http://www.sample.com/deals-sitemap.xml
Sitemap: http://www.sample.com/hosting-sitemap.xml

موفق باشید!

دیدگاه ها

پاسخ دهید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *