Chia sẻ Cách điều hướng spider hiệu quả

Thảo luận trong 'SEO Onpage - Tối Ưu Website' bắt đầu bởi huyenthanh, 17/8/16.

  1. huyenthanh PageRank 0 Member

    Tham gia ngày:
    4/8/16
    Nơi ở:
    Hà Nội
    Mọi người hay nói đến cách tối ưu onpage như thế nào để chuẩn seo, về tittle rồi discirption, … nhưng những người mới vào nghề có thể ít chú ý đến file robots. Theo mình thấy đây là file khá quan trọng tương tự như sitemap vậy. File robots sẽ giúp cho bạn điều hướng spider (bots google) hiệu quả nhất. File robots.txt là file đầu tiên mà Spider đọc khi truy cập vào website. Robots.txt là một file dạng txt có chứa các câu lệnh để định ra các thành phần với quyền hạn riêng biệt cho từng bọ tìm kiếm. Nó cho phép chặn spider khi truy cập vào website của bạn tránh nó quét đến những gì không cần index. Ví dụ như một website bán hàng thường có các mục như giỏ hàng, hướng dẫn thanh toán, … những phần này chắc hẳn sẽ không ai cần SEO làm gì đúng không. Vậy thì không cần để google đọc nó làm gì, vì khi spider truy cập vào website của bạn nó chỉ ở lại ở một thời gian nhất định mà thôi, hãy để nó quét những gì cần quét.

    Vậy tạo file robots cho website như thế nào?

    Việc này thì cần nhờ đến coder của bạn nhé. Cú pháp file robots.txt

    User-agent: *

    Disallow:/Thư-mục/-cấm vào đường dẫn

    Disallow:/Thư-mục1/- Cấm vào đường dẫn

    - Dùng để xác định quyền truy cập của Spider khi nó truy cập vào website

    - Để sửa file này cần truy cập được vào thư mục gốc của website trên sever, sau đấy sửa file.
     
    #1
  2. Dau PageRank 1 Member

    Tham gia ngày:
    16/8/16
  3. huyenthanh PageRank 0 Member

    Tham gia ngày:
    4/8/16
    Nơi ở:
    Hà Nội
    Nếu thấy bổ ích, xin cho một like ạ, xin chân thành cảm ơn :D
     
    #3
  4. sohopremier PageRank 0 Member

    Tham gia ngày:
    18/8/16
    Cảm ơn bạn rất hiệu quá nhé
     
    #4
  5. thinhphuocnguyen PageRank 0 Member

    Tham gia ngày:
    4/8/16
    Nơi ở:
    Thành Phố Hồ Chí Minh
    Điều mình chưa biết.
    Để mình lam theo xem sao.
    Cứ là chú trọng vào bài viết cho website không
     
    #5
  6. huyenthanh PageRank 0 Member

    Tham gia ngày:
    4/8/16
    Nơi ở:
    Hà Nội
    Dùng từ cho chuyên nghiệp chút thôi bạn :D
     
    #6
  7. nguyenlinh103 PageRank 0 Member

    Tham gia ngày:
    3/8/16
    Khi cấm robot truy cập vào url nào trong robot.txt thì trong google webmater tool sẽ có thông báo là chặn url đó phải không các bạn?
     
    #7

Chia sẻ trang này