بک لینک

موضوع بسته شده است 
یک Robots.txt کامل برای وی بی
#1
سلام
براتون یک robots.txt تقریبا کامل و خوب قرار میدم
می تونید با توجه به نیاز های سایتتون خودتان تغییرات لازم را روش انجام بدید
امیدوارم که مورد استفاده قرار بگیره

آموزش استفاده :
یک فایل Robots.txt در روت انجمن خود بسازید و کد زیر را در آن قرار دهید و سیو کنید



کد:
کد:
User-agent: *
Disallow: /printthread
Disallow: /send message
Disallow: /register
Disallow: /login
Disallow: /new reply
Disallow: /subscription
Disallow: /private
Disallow: /misc
Disallow: /show post
Disallow: /report
Disallow: /new thread
Disallow: /calendar
Disallow: /poll
Disallow: /links
Disallow: /arcade
Disallow: /search
Disallow: /FAQ
Disallow: /online
Disallow: /vb shout
Disallow: /calendar.php
Disallow: /editpost.php
Disallow: /member.php
Disallow: /memberlist.php
Disallow: /misc.php
Disallow: /newreply.php
Disallow: /newthread.php
Disallow: /printthread.php
Disallow: /private.php
Disallow: /register.php
Disallow: /report.php
Disallow: /search.php
Disallow: /showgroups.php
Disallow: /usercp.php
Disallow: /impressum.php
Disallow: /admincp/
Disallow: /modcp/
Disallow: /online.php
Disallow: /subscription.php
Disallow: /sendtofriend.php
Disallow: /threadrate.php
Disallow: /poll.php
Disallow: /attachment.php
Disallow: /avatar.php
Disallow: /faq.php
Disallow: /usercp.php
Disallow: /profile.php
Disallow: /online.php
Disallow: /cv_rss_feeds.php
Disallow: /showgroups.php
Disallow: /admincp
Disallow: /modcp
Disallow: /usercp.php
Disallow: /calendar.php
Disallow: /search.php
Disallow: /members/albums.html
Disallow: /clientscript
Disallow: /cpstyles
Disallow: /customavatars
Disallow: /customgroupicons
Disallow: /customprofilepics
Disallow: /htaccess
Disallow: /images
Disallow: /includes
Disallow: /signaturepics
Disallow: /infobar.css
Disallow: /login.php
Disallow: /ajax.php
Disallow: /attachment.php
Disallow: /calendar.php
Disallow: /cron.php
Disallow: /editpost.php
Disallow: /global.php
Disallow: /image.php
Disallow: /inlinemod.php
Disallow: /joinrequests.php
Disallow: /login.php
Disallow: /member.php
Disallow: /memberlist.php
Disallow: /misc.php
Disallow: /moderator.php
Disallow: /newattachment.php
Disallow: /newreply.php
Disallow: /newthread.php
Disallow: /online.php
Disallow: /poll.php
Disallow: /postings.php
Disallow: /printthread.php
Disallow: /profile.php
Disallow: /register.php
Disallow: /report.php
Disallow: /reputation.php
Disallow: /search.php
Disallow: /sendmessage.php
Disallow: /showgroups.php
Disallow: /subscription.php
Disallow: /threadrate.php
Disallow: /usercp.php
Disallow: /usernote.php
Disallow: /arcade.php
Disallow: /ajax.php
Disallow: /attachment.php
Disallow: /calendar.php
Disallow: /cron.php
Disallow: /editpost.php
Disallow: /image.php
Disallow: /inlinemod.php
Disallow: /joinrequests.php
Disallow: /login.php
Disallow: /member.php
Disallow: /memberlist.php
Disallow: /misc.php
Disallow: /moderator.php
Disallow: /newattachment.php
Disallow: /newreply.php
Disallow: /newthread.php
Disallow: /online.php
Disallow: /poll.php
Disallow: /postings.php
Disallow: /printthread.php
Disallow: /profile.php
Disallow: /register.php
Disallow: /report.php
Disallow: /reputation.php
Disallow: /search.php
Disallow: /sendmessage.php
Disallow: /showgroups.php
Disallow: /subscription.php
Disallow: /threadrate.php
Disallow: /usercp.php
Disallow: /usernote.php
Disallow: /clientscript/
Disallow: /includes/
Disallow: /install/
Disallow: /cron.php
Disallow: /inlinemod.php
Disallow: /joinrequests.php
Disallow: /calendar.php
Disallow: /editpost.php
Disallow: /login.php
Disallow: /member.php
Disallow: /memberlist.php
Disallow: /misc.php
Disallow: /moderator.php
Disallow: /newreply.php
Disallow: /newthread.php
Disallow: /printthread.php
Disallow: /register.php
Disallow: /report.php
Disallow: /search.php
Disallow: /showgroups.php
Disallow: /usercp.php
Disallow: /impressum.php
Disallow: /admincp/
Disallow: /modcp/
Disallow: /online.php
Disallow: /subscription.php
Disallow: /sendtofriend.php
Disallow: /sendmessage.php
Disallow: /spiders.php
Disallow: /subscription.php
Disallow: /threadrate.php
Disallow: /poll.php
Disallow: /attachment.php
Disallow: /avatar.php
Disallow: /usercp.php
Disallow: /usernote.php
Disallow: /profile.php
Disallow: /disclaimer.php
Disallow: /billspaypal.php
Disallow: /privacy.html
Disallow: /customavatars/
Disallow: /xmlrpc.php
Disallow: /cgi-bin/
 سپاس شده توسط miraziz ، Pc-island
#2
سلام دوست عزیز !
من با Robot نویسی آشنا نیستم !!!
میشه به طور کامل دربارش توضیح بدید ؛ و بگید که این Robots.txt یی که نوشتید ، چیکار میکنه ؟؟!!!

موفق باشید.

...::: یاعلی :::...
برای تعجیل در فرج آقا امام زمان (عج) ، سه صلوات محمدی بفرست.
اللهم صلي على محمد و ال محمد و عجل فرجهم

Telegram ID: @AliRezaBeitari
#3
سلام دوست عزیز ربات ها یک جور هدایت کننده جستجو گر ها و مهمان ها به صفحه دلخواه شما هستن....البته سعی میکنم یکم بیشتر راجع به ربات ها براتون مطلب دقیق تر قرار بدم...

وظیفه فایل robots.txt محدود کردن دسترسی روبات های گوگل و سایر موتورهای جستجو به محتویات سایت شماست. این روبات ها بصورت کاملا اتوماتیک عمل کرده و قبل از ورود به هر سایت یا صفحه ای از وجود فایل robots.txt بر روی آن و محدود نبودن دسترسی محتوا مطمئن میشوند. تمامی روبات های استاندارد در اینترنت به این قوانین و محدودیت ها احترام گذاشته و صفحات شما را بازدید و ایندکس نخواهند کرد ولی روبات های اسپم توجهی به این فایل نخواهند داشت. اگر تمایل به حفظ امنیت محتوایی خاص و پنهان کردن آن از دید روبات های اینترنتی دارید بهتر است از پسورد گذاری صفحات استفاده کنید.

در عمل استفاده از فایل robots.txt به شما این امکان را میدهد که صفحات سایت را تنها مختص کاربران اینترنتی طراحی کرده و ترسی از محتوای تکراری، وجود لینک های بسیار در آن صفحه و تاثیر منفی بر سئو سایت نداشته باشید. همچنین به شما این امکان را میدهد که صفحات بی ارزش و کم محتوا را از دید موتورهای جستجو پنهان کنید تا زمان روبات ها در سایت شما برای ایندکس کردن این صفحات هدر نرود.
شما تنها زمانیکه قصد محدود کردن روبات های گوگل را داشته باشید از فایل robots.txt استفاده میکنید و اگر از نظر شما تمام صفحات سایت قابلیت و ارزش ایندکس شدن توسط گوگل را داشته باشند نیازی به این فایل نخواهید داشت. حتی قرار دادن یک فایل خالی با همین نام نیز لزومی ندارد.
برای قرار دادن یک فایل robots.txt شما باید به هاست دسترسی داشته و آن را در ریشه اصلی کپی کنید. اگر به هر دلیل دسترسی شما به سرور محدود شده باشد میتوانید با قرار دادن تگ های متا در هدر صفحه دسترسی روبات به آن را محدود کنید.


======
این رو از یه سایت پیدا کردم که کامل تر شرح داده....
 سپاس شده توسط Mr.AliReza ، MR.MOHAMMAD ، mmsh ، Gh-Moradi ، tarenoco
#4
سلام از این ربات ها برای معرفی یک صفحه خاص به موتور های جستجو هم میشه استفاده کرد ؟
#5
فکر میکنم اگر صفحه خاصی مد نظرتون باشه بهتره بدین اختصاصی کد نویسی کنن...
53
#6
(92-12-6، 12:47 عصر)tarenoco نوشته است: سلام از این ربات ها برای معرفی یک صفحه خاص به موتور های جستجو هم میشه استفاده کرد ؟
از کد های هدایت به صفحه هم استفاده کنین بد نیست....
موضوع بسته شده است 


پرش به انجمن:


کاربرانِ درحال بازدید از این موضوع: 1 مهمان