Hỏi về Crawl-delay trên file robots

Thảo luận trong 'Thảo Luận SEO Và Trợ Giúp SEO' bắt đầu bởi gamevtc, 21/2/20.

  1. gamevtc

    gamevtc Member

    Bài viết:
    31
    Đã thích:
    3
    Chào các bác,
    Hiện tại em thấy website của một số trang họ để mẫu như sau:
    Mã:
    User-agent: Twitterbot
    Allow: /
    Crawl-delay: 30
    
    Số 30 ở kia là định nghĩa thời gian nào bot được truy cập vậy ạ? 30 giây, 30 phút hay 30 ngày ạ.
    Mong nhận được sự chia sẻ từ các bác.
     
    Đang tải...
  2. ThongHutBePhot

    ThongHutBePhot Member

    Bài viết:
    63
    Đã thích:
    3
    Ý là bot mày vô từ từ thôi, sập site tao mất! Thực sư thì tùy mỗi site ho nhắc Bot vào có chừng mực ấy mà!
     
Tags:
Đang tải...
Đang tải...