سئو

طراحی سایت

طراحی قالب

هاست

میزبانی وب
بهینه سازی

خرید هاست وردپرس

هاست ایران و خارج وردپرس

خرید هاست پربازدید

هاست پربازدید فرانسه و آلمان

فیلم آموزشی

آموزش سئو و بهینه سازی

موقعیت شما :
صفحه اصلی » تی اس تی پلن » فایل روبوت تکست
شبکات اجتماعی ما
کانال تلگرام تی اس تی پلن کانال اینستاگرام تی اس تی پلن

فایل روبوت تکست

فایل روبوت تکست

فایل روبوت تکست ( Robots.txt ) یک فایل متنی است .

این ویژگی به وبسایت اجازه می دهد تا دستور العمل هایی را به ربات های خزنده وب (web crawling bots) ارائه کند .

موتورهای جستجو مانند گوگل و بینگ از این خزنده های وب که برخی اوقات نیز به عنوان ربات های وب شناخته می شوند .

برای آرشیو و دسته بندی کردن وبسایت ها از این فایل استفاده می کنند .

وظیفه فایل robots.txt محدود کردن دسترسی روبات های گوگل و سایر موتورهای جستجو به محتویات سایت شماست .

این روبات ها بصورت کاملا اتوماتیک عمل می کند .

اگر تمایل به حفظ امنیت محتوایی خاص و پنهان کردن آن از دید روبات های اینترنتی دارید بهتر است از پسورد گذاری صفحات استفاده کنید .

صرف نظر کردن از ایندکس کردن یک فایل یا دایرکتوری می تواند به منظور حفظ امنیت باشد .

با این فایل میتوان به موتورهای جستجوگر دستور داد که دایرکتوری یا فایلی را در نتایج جستجوی خود نشان ندهند .

برای جلوگیری از ورود تمامی روبات های اینترنتی به صفحه از تگ :

<meta name=”robots” content=”noindex” />

و برای محدود کردن روبات های گوگل از تگ :

<meta name=”googlebot” content=”noindex” />

برچسب ها :
اشتراک گذاری :

RssLenzorCloobFacenamaInstagramAparatTwitterFacebookGoogleplus
بیوگرافی نویسنده مهندس شکوهی نیا :

دیدگاه شما در مورد این مطلب چیست :

دیدگاه‌ها بسته شده‌اند.