close
تبلیغات در اینترنت
robot.txt چیست؟اهمیت استفاده ازrobot.txt =

دیردانلود,دیر دانلود

 موتورهای جستجو همانند گوگل ، یاهو و بینگ مایکروسافت برای برای یافتن و ایندکس کردن صفحات مختلف وب و سایت های موجود از روبات های جستجو که به spider , robot و یا crawler معروف هستنداستفاده می کننید . این روبوت ها با پیمایش خودکار در صفحات وب اطلاعات مربوط به صفحات رو بدست میارند و اونها رو…

**
==
جستجوگر پیشرفته



آخرین ارسال های انجمن
2222
عنوانپاسخبازديدآخرين ارسال
شبکه جدید قاصدک ( کارتن ) در هاتبرد درحال پخش بااین فرکانسشبکه جدید قاصدک ( کارتن ) در هاتبرد درحال پخش بااین فرکانس375317070
عکس های عجیب زنی با سه سینهعکس های عجیب زنی با سه سینه03331admin
پرت شدن دختر 16 ساله از بالای پل مدیریت در تهران تصویر=امروزپرت شدن دختر 16 ساله از بالای پل مدیریت در تهران تصویر=امروز01702admin
عکس های فوق جالب و خنده دارعکس های فوق جالب و خنده دار0589admin
جدیدترین مدل کفش های 2014 خانم ها Gucciجدیدترین مدل کفش های 2014 خانم ها Gucci0470majidsat
جسجو و چک کردن سایت تان درلیست سیاه گوگل { google } همراه تصاویرجسجو و چک کردن سایت تان درلیست سیاه گوگل { google } همراه تصاویر0320majidsat
بردن مطالب سایت شما به صفحه اول گوگل ( google )روزی 20 مطلب یا بیشتربردن مطالب سایت شما به صفحه اول گوگل ( google )روزی 20 مطلب یا بیشتر0220majidsat
بازگشت فصل دوم سریال ستایش به شبکه 3بازگشت فصل دوم سریال ستایش به شبکه 30362majidsat
دختری در کرج کشف حجاب کرد+تصویردختری در کرج کشف حجاب کرد+تصویر01758admin
دانلود رایگان نرم افزارپاکسازی رایانه از تروجان هاLoaris Trojan Remover 1.3.0.6 دانلود رایگان نرم افزارپاکسازی رایانه از تروجان هاLoaris Trojan Remover 1.3.0.6 0380admin
فرکانس جدید pn TV و طپش در ماهواره یاه ستفرکانس جدید pn TV و طپش در ماهواره یاه ست01943majidsat
دانلود آخرین مرورگرفارسی محبوب موزیلا فایرفاکس26 Mozillaدانلود آخرین مرورگرفارسی محبوب موزیلا فایرفاکس26 Mozilla0544majidsat
شبکه جدید حوادث و ایجاد انشبکه جدید حوادث و ایجاد ان0437majidsat
 استعلام تخلفات رانندگي استعلام تخلفات رانندگي0708majidsat
بهترین رژ لب های با 12 رنگ برای پوست های روشنبهترین رژ لب های با 12 رنگ برای پوست های روشن0386majidsat
تاثیر عجیب 7میوه بر پوست صورتتاثیر عجیب 7میوه بر پوست صورت0418admin
موضوع مهم :تایپک مخصوص: دانلود آهنگ های کرمانجیموضوع مهم :تایپک مخصوص: دانلود آهنگ های کرمانجی193773admin
قاتلی که سهیلا خانوم و کشت فرار کرد(دختری که در بیمارستان جان دادبعداز سه بارزنگ زدن)قاتلی که سهیلا خانوم و کشت فرار کرد(دختری که در بیمارستان جان دادبعداز سه بارزنگ زدن)0395admin
دانلودنرم افزار مدیریت سرمایه شخصی-icash v7.4.6دانلودنرم افزار مدیریت سرمایه شخصی-icash v7.4.60322admin
خوش رنگ کردن موهای تان با گیاهان طبیعیخوش رنگ کردن موهای تان با گیاهان طبیعی0433admin
[Forum_Post_Title]صفحه اول انجمن | [Forum_Post_Title] ثبت نام در انجمن | [Forum_Post_Title] ورود به پنل کاربری
 موتورهای جستجو همانند گوگل ، یاهو و بینگ مایکروسافت برای برای یافتن و ایندکس کردن صفحات مختلف وب و سایت های موجود از روبات های جستجو که به spider , robot و یا crawler معروف هستنداستفاده می کننید . این روبوت ها با پیمایش خودکار در صفحات وب اطلاعات مربوط به صفحات رو بدست میارند و اونها رو به موتور جستجوی مربوطه ارسال میکنند . معمولا بر اساس اینکه یک سایت چند مدت به چند مدت آپدیت میشه تعداد دفعاتی که این روبات های جستجوگر در روز به سایت مراجعه می کنند متفاوته .
صفحات موجود در سایتهای مختلف از لحاظ امنیتی و درجه حساسیت متفاوت هستند و شاید شما دوست نداشته باشید بعضی از صفحات (مثل صفحات مدیریتی و ادمین سایت) در موتورهای جستجو ایندکس بشه و آدرسش در این موتورها در اختیار عموم باشه . برای اینکه به موتورهای جستجو بگید چه صفحات یا فولدرهایی در سایت رو پیمایش و ایندکس کنه و اینکه چه صفحاتی رو ایندکس نکنه می تونید از یک فایل با نام robot.txt در ایندکس هاستینگ سایتتون و یا در پوشه ای خاص استفاده کنید تا به موتورهای جستجو بگید جا مجازید پیمایش کنید و کجا مجاز نیستید :

http://www.7learn.com/wp-content/uploads/Robot-txt-300x169.png

http://www.7learn.com/wp-content/uploads/serobots.gif
همونطور که در عکس بالا میبینید ، در سایتی که از فایل robot.txt استفاده نشده باشه روبات های موتورهای جستجو همه ی صفحات رو ایندکس می کنند در صورتی که با استفاده از این فایل میشه این ایندکس شدنها رو برای پوشه های مختلف کنترل کرد ! از این فایل همچنین برای جلوگیری از ایندکس شدن تکراری صفحات با url های مختلف استفاده میشه .
:: خوب حالا که فهمیدید دلیل استفاده از فایل مهم robot.txt چی هست نظر یادت نره

t
t
:: امتیاز: نتیجه : 0 امتیاز توسط 0 نفر مجموع امتیاز : 0

:: بازدید : 145
:: ارسال شده در: توسعه / توسعه وب , زبان برنامه نویسی ,

نویسنده
نویسنده : ADMIN
تاریخ : [شنبه 16 آذر 1392 ] [ 7:19]
تاریخ
ارسال نظر برای این مطلب

نام
ایمیل (منتشر نمی‌شود) (لازم)
وبسایت
:):(;):D;)):X:?:P:*=((:O@};-:B/:):S
نظر خصوصی
مشخصات شما ذخیره شود ؟[حذف مشخصات] [شکلک ها]
کد امنیتی
آخرین مطالب ارسالی
ارتباط با مدیر
user33
progress عضو شويد

نام کاربری :
رمز عبور :

progress فراموشی رمز عبور؟

progress عضویت سریع
نام کاربری :
رمز عبور :
تکرار رمز :
ایمیل :
نام اصلی :
کد امنیتی : *کد امنیتیبارگزاری مجدد
نرم افزارها
اینترنت
کاربردی
گرافیک
مالتی مدیا
امنیتی
اداری و دفتری
توسعه / توسعه وب
دیسک
دسکتاپ
سیستم عامل
ماهواره
ریسور
مبایل
بازی
دانلود اهنگ های شاد محلی کرمانجی استان خراسان شمالی
مطالب عمومی سایت
داستان و حکایات و معمای بسیار جالب
خبرهای اقتصادی و ثبت نامی
55 بازدید سال بازدید سال : 399
بازدید کلی بازدید کلی : 399

اطلاعات شما اطلاعات شما
آِ ی پیآِ ی پی : 54.167.230.68
مرورگر مرورگر :
سیستم عامل سیستم عامل :
پشتیبانی:دانلود اهنگ کرمانجی
==