Chia sẻ Cách chỉnh file Robot.txt tối ưu nhất, các bác vào thảo luận.

Thảo luận trong 'SEO Blogspot' bắt đầu bởi ducquan1008, 16/1/14.

  1. ducquan1008 PageRank 1 Member

    Tham gia ngày:
    15/8/13
    Em tìm trên mạng cách tối ưu file Robot.txt. có nhiều ý kiến và cách suy nghĩ khác nhau. Các bác vào cho ý kiến xem dư nào là OK nhất ạ!

    Robot.txt trong blog của em:
    User-agent: Mediapartners-Google
    Disallow:
    User-agent: *
    Allow: /
    Disallow: /search
    Disallow: /*?updated-max=*
    Disallow: *archive.html
    Sitemap: ...feeds/posts/default?orderby=updated
     
    Chỉnh sửa cuối: 16/1/14
    #1
  2. administrator
    Administrator
    Thành viên BQT Admin Smod Mod

    Tham gia ngày:
    6/2/13
    robots.txt được gọi là tối ưu nhất đó là:
    Mã:
    User-agent: *
    Allow: /
    Disallow: 
    Còn nếu bạn rành về mã nguồn website hay cấu trúc thì thêm sau đó các dòng như:
    Disallow: /forum
    ...

    Còn dòng User-agent: Mediapartners-Google dành cho riêng từng search engine, theo mình thì không cần nó cũng được, vì bạn không cần phân ra cho từng con bots một :D
     
    #2
    boyka23 and ducquan1008 like this.
  3. ducquan1008 PageRank 1 Member

    Tham gia ngày:
    15/8/13
    Disallow: /*?updated-max=*
    Disallow: *archive.html
    Theo bác có cần 2 cái này ko? ( em chỉ nói riêng trong blogspot thôi ạ)
     
    #3
  4. administrator
    Administrator
    Thành viên BQT Admin Smod Mod

    Tham gia ngày:
    6/2/13
    Cũng được bạn ạ, cái này giúp nó không phải "ăn rồi" đi theo cái này, bạn có thể tham khảo file robots.txt của vnseo.edu.vn :)
     
    #4
    ducquan1008 thích bài này.
  5. ducquan1008 PageRank 1 Member

    Tham gia ngày:
    15/8/13
    Tham khảo kiểu gì hả addmin
     
    #5
  6. ducquan1008 PageRank 1 Member

    Tham gia ngày:
    15/8/13
    " Disallow: /search "
    Lệnh này đang chặn ko cho bot vào từ khóa đang lên top của em các bác ạ!,,,hjxx. Em bỏ lệnh đấy đi có đc ko các bác?

    Các bác cho ý kiến giúp em!
     
    Chỉnh sửa cuối: 17/1/14
    #6
  7. mrkalen PageRank 1 Member

    Tham gia ngày:
    7/1/14
    Nơi ở:
    Ho Chi Minh City
    bác bỏ dòng đó đi, không ảnh hưởng gì đâu nhé :cool:
     
    #7

Chia sẻ trang này