فایل robots txt چیست و نقش آن در سئو

( کد: OL66 )

مدرس: داریوش ببریان
من داریوش ببریان هستم. نزدیک به 17 سال در زمینه طر...
  • آموزش ها99
  • کتاب ها6
  • Follower83

  • مدت زمان آموزش 53 دقیقه
  • حجم فایل آموزش 222.5 MB
  • زبان آموزش فارسی
  • تعداد درس ها 1 درس
  • سطح آموزش (مبتدی تا پیشرفته)
  • تاریخ بروزرسانی 1399 /04 /02
  • دانلود سیلابس
برای مشاهده لینک دانلود و یا خرید آموزش ابتدا باید ثبت نام نمایید و یا وارد حساب کاربری خود شوید.

چنانچه فصل 2 مجموعه آموزش سئو را خریداری کرده اید, نیازی به خرید این درس نیست

توضیحات بیشتری از " فایل robots txt چیست و نقش آن در سئو "

همیشه استفاده کردن از robots.txt و دستوراتی که در داخل این فایل نوشته میشود مورد بحث بسیاری از افرادی است که در زمینه سئو فعالیت دارند. در این درس قصد داریم در مدت زمان زیادی تمامی جنبه هایی از ساختن تا نحوه استفاده کردن و گذاشتن این فایل ساده در داخل سرور و کنار فایل های دیگر وب سایت تا نوشتن درست و اصولی و یادگیری قوانین و قواعد آن با شما صحبت کنیم

لیست درس ها

زمان آموزش
  • فایل robots txt چیست و نقش آن در سئو 53:13

    سیلابس:

    1. تعریف اولیه از فایل robots.txt
    2. معرفی سازمان Robots Exclusion Protocol و وب سایت مربوط به فایل robots.txt جهت نوشتن دستورات
    3. بررسی نقش فایل robots.txt در سئو سایت
    4. باید ها و نبایدهایی که در فایل robots.txt میتواند وجود داشته باشد
    5. شرایط و دلایل استفاده کردن از robots.txt
    6. نکات مهمی که باید در به کار بردن فایل robots.txt رعایت نمود
    7. تفاوت robots.txt با XML Sitemap
    8. بررسی واکنش Crawler موتورهای جستجو در برخورد با robots.txt
    9. معرفی انواع Crawlerها در دنیا همراه با نام تمامی آنها (User-agent)
    10. بررسی فایل robots.txt سایت های بزرگ دنیا
    11. ایجاد نمودن فایل robots.txt در داخل هاست
    12. آموزش کامل نحوه نوشتن دستورات در فایل robots.txt همراه با مثال های متعدد
    13. معرفی Googlebot-image و Googlebot-video
    14. آشنایی ابتدایی با Duplicate Content و نقش robots.txt در جلوگیری از آن
    15. وقفه بین Crawl شدن صفحات توسط robots.txt
سوالات متداول ( 5 ) سوال مطرح شده
  • فایل robots.txt چیست؟

    به فایل متنی گفته میشود که برای مدیریت Crawlerهای موتورهای جستجو میتوان از آن استفاده نمود. این فایل بر روی سرور و داخل Root Folder و در کنار صفحه اصلی گذاشته میشود و هر موتور جستجویی قبل از اینکه به محتویات سایت دسترسی پیدا نماید ابتدا این فایل را خوانده تا متوجه شود کجاهای سایت را index کند و کجاها را نگاه نکند.

  • آیا فایل robots.txt تنها برای گوگل میباشد؟

    خیر این فایل فقط برای موتور جستجوی گوگل نیست بلکه با توجه به دستوراتی که داخل آن نوشته میشود میتوان دقیقا به موتور جستجوی خاصی هم اشاره کرد. نه فقط موتورهای جستجو بلکه میتوان هر Crawlerی که میتواند سایت را بخزد و ببیند هم میتوان محدودیت هایی برای آن در نظر گرفت.

  • آیا فایل robots.txt برای سئو اجباری است؟

    خیر. قرار دادن این فایل کاملا اختیاری است و اگر دوست دارید تا موتورهای جستجو تمامی صفحات و فایل ها و فولدرهای سایت شما را پیدا نمایند, نیازی به ایجاد نمودن این فایل نیست

  • چرا نباید موتورهای جستجو بخشی از سایت را index نمایند؟

    لازم است برخی از صفحات و یا فایل های سایت توسط موتورهای جستجو پیدا نشوند مانند صفحات ورود به پنل مدیریت و یا خود پنل مدیریتی سایت که فقط خود صاحب سایت باید آن را ببیند و مثال هایی از این دست. بنابراین در این شرایط میتوان از فایل robots.txt استفاده نمود.

  • آیا روش های دیگری به غیر از فایل robots.txt وجود دارد؟

    بله حتما. روش هایی مانند مسدود نمودن پیدا شدن صفحات توسط متا robots و روش های برنامه نویسی داینامیک و یا گذاشتن کلمه عبور برای دیده شدن صفحات وب سایت.

من داریوش ببریان هستم. نزدیک به 17 سال در زمینه طراحی و برنامه نویسی و سئو وب سایت در حال فعالیت میباشم و 14 سال هم در زمینه آموزش دروس مختلف اشاره شده مشغول به تدری...
  • آموزش ها99
  • کتاب ها6
  • Follower83
ثبت نظر ( 1 ) نظر ثبت شده
برای ثبت نظر ابتدا وارد حساب کاربری خود شوید و یا ثبت نام نمایید...
  • 1398/10/05
    اصغری محسن
    خیلی خوب بودش
    • 1398/10/05
      پشتیبان
      موفق باشید :)