آموزش بهینه کردن فایل Robots.txt برای سئو

با درود خدمت کاربران عزیز پروان وب امروز آموزش بهینه کردن فایل Robots.txt برای سئو را برای شما دوستان آماده کرده ایم که می خوایم Robots.txt را در امر بهینه تقویت کنیم این فایل در واقع بر سئوی کلی سایت اثر میذاره و کارش اینه که با موتورهای جستجو ارتباط برقرار میکنه و به اونها میفهمونه که کدوم بخش های سایتتون رو باید ایندکس کنن.
آیا وجود فایل Robots.txt ضروریه؟
نبود این فایل، مانعی برای ایندکس کردن و خزش مورتوهای جستجو در سایت شما نیست، اما همون طور که گفتم وجود این فایل میتونه کمک موثری به بهبود سئوی کلی سایت شما بکنه.بنابراین پیشنهاد من اینه که حتماً این فایل رو بسازین. اگه میخواین نقشه ی xml سایتتون رو به موتورهای جستجو بفرستین، این همون جایی هست که مورتوهای جستجو به دنبال نقشه ی سایت شما می گردن، مگر اینکه اون رو در Google Webmaster Tools مشخص نکرده باشین.
چطور باید از فایل Robots.txt استفاده کنیم؟
اولین خط که user agent نامیده میشه، در واقع نام ربات جستجویی هست که شما باهاش ارتباط برقرار می کنین، مثلا ربات گوگل (Googlebot)، ربات بینگ (Bingbot) و برای شامل کردن تمام ربات ها هم می تونین، علامت * رو در مقابلش قرار بدین. خطوط بعدی ساختارهای مجاز و غیرمجاز برای ایندکس شدن رو نشون میدن، یعنی شما می تونین مشخص کنین ربات، مجازه کدوم شاخه ها رو ایندکس کنه و کدوم شاخه ها رو مجاز نیست. فایل زیر یه نمونه از فایل robots.txt هست که تمام ربات های جستجوگر رو فراخوانی میکنه و در ضمن به شاخه ی آپلود تصاویر رو برای ایندکس شدن مجاز میدونه و دو شاخه ی دیگه رو غیرمجاز میدونه.
User-Agent: * Allow: /wp-content/uploads/ Disallow: /wp-content/plugins/ Disallow: /readme.html
افزودن نقشه ی XML سایت به فایل robots.txt
اگر از پلاگین هایی مثل WordPress SEO by Yoast و … برای تولید نقشه ی سایتتون استفاده می کنین، این پلاگین ها، به صورت اتوماتیک، نقشه ی سایتتون رو به فایل robots.txt اضافه خواهد کرد. اما اگه پلاگین موفق به انجام این کار نشد، شما اینکار رو باید به صورت دستی انجام بدین، یعنی همون آدرسی که توی پلاگین برای نقشه ی سایت گذاشته شده رو باید استفاده کنین. کدهای زیر یه نمونه رو نشون میدن.
Sitemap: http://www.example.com/post-sitemap.xml Sitemap: http://www.example.com/page-sitemap.xml
موفق باشید
سلام خدمت شما، در خدمتتون هستم
سلام خدمت شما، در خدمتتون هستم
-
چگونه از غول های فارسی بک لینک رایگان بگیریم ؟!!!
15 فروردين 140418 1,289 0 -
افزونه پنل کاربری حرفه ای و بهترین افزونه ثبت نام وردپرس MemberShip Pro درگاه زرین پال
12 شهريور 139915 5,319 5 -
افزایش سرعت بارگذاری – بهترین افزونه های کش وردپرس
20 آذر 139314 307 0 -
دانلود افزونه Gravity Forms : ساخت انواع فرم های وردپرس
27 آذر 139313 397 0 -
ارسال خودکار مطالب وردپرس به تلگرام، اینستاگرام و سایر شبکههای اجتماعی
1 ارديبهشت 14049 3,511 0 -
آموزش قرار دادن سه نقطه برای متن های بسیار طولانی در وب سایت
8 تير 13969 1,774 3 -
معرفی 7 افزونه ساخت سایت مشاور املاک وردپرس
21 ارديبهشت 14049 2,957 4.8 -
آموزش افزونه حتما بخوانید وردپرس
25 بهمن 13958 386 5
-
نشانهگذاری اسکیما چیست و چه تاثیری در نتایج جستجو دارد؟
25 ارديبهشت 14040 13 4 -
چگونه بدون از دست دادن اطلاعات، نسخه ووکامرس را به نسخه قبلی برگردانیم؟
25 ارديبهشت 14040 22 0 -
۸ تا از بهترین افزونههای لیست علاقهمندی ووکامرس برای فروشگاههای وردپرسی
24 ارديبهشت 14040 17 0 -
نحوه ساخت قالب وردپرس با React: آموزش گامبهگام پروژهمحور
23 ارديبهشت 14040 15 0 -
آموزش تنظیمات مالیات در ووکامرس (راهنمای کامل)
23 ارديبهشت 14040 15 0 -
افزایش سرعت سایت با افزونه jetpack وردپرس + آموزش
21 ارديبهشت 14040 463 0 -
معرفی 7 افزونه ساخت سایت مشاور املاک وردپرس
21 ارديبهشت 14049 2,957 4.8 -
آموزش پاکسازی وردپرس | شناسایی کد های مخرب و بد افزار
20 ارديبهشت 14041 1,006 5
تبلیغات متنی
به این مطالب نیز شاید علاقه مند باشید ...
مطالب مشابه
نشانهگذاری اسکیما چیست و چه تاثیری در نتایج جستجو دارد؟
نشانهگذاری اسکیما (Schema Markup) نوعی داده ساختاریافته است که به زبان ساده به موتورهای جستجو کمک میکند تا بهتر متوجه شوند محتوای هر صفحه وب درباره چیست. این دادهها مستقیماً به کدهای HTML سایت اضافه میشوند و اطلاعات دقیقتری درباره عناصر مختلف صفحه ارائه میدهند؛ مانند معرفی افراد، سازمانها، محصولات، رویدادها و حتی فیلمها. در […]
چگونه بدون از دست دادن اطلاعات، نسخه ووکامرس را به نسخه قبلی برگردانیم؟
آیا به دنبال روشی ساده برای تغییر نسخه ووکامرس بدون از بین رفتن دادهها هستید؟ اگر پس از بهروزرسانی ووکامرس با مشکلاتی مواجه شدهاید، دانگرید کردن به نسخه قبلی میتواند فروشگاه آنلاین شما را به وضعیت پایدار برگرداند. در این بخش از آموزش کامل بازگردانی وردپرس به نسخه قبلی، سه روش کاربردی برای بازگشت به […]
۸ تا از بهترین افزونههای لیست علاقهمندی ووکامرس برای فروشگاههای وردپرسی
اگر فروشگاه اینترنتی شما بر پایه ووکامرس ساخته شده، احتمالاً به دنبال راهی هستید تا تجربه خرید کاربران را جذابتر کنید و بازگشت آنها به سایت را افزایش دهید. یکی از سادهترین و مؤثرترین روشها برای این کار، استفاده از افزونه لیست علاقهمندی است. با استفاده از افزونه علاقه مندی ووکامرس برای سایت های وردپرسی، […]
نحوه ساخت قالب وردپرس با React: آموزش گامبهگام پروژهمحور
در این مقاله، قصد داریم با رویکردی پروژهمحور، نحوه طراحی قالب وردپرس با استفاده از React را آموزش دهیم. ادغام قدرت رابط کاربری React با سیستم مدیریت محتوای وردپرس، امکانی فراهم میکند تا قالبهایی سریع، مدرن و تعاملی طراحی کنید. این راهنما به شما کمک میکند تا با استفاده از ابزارهای مدرن، یک قالب وردپرس […]
لیست نظرات