Chia sẻ Robots.txt là gì? 3 Cách tạo file robots.txt cho wordpress

Thảo luận trong 'Thảo luận và trợ giúp SEO' bắt đầu bởi hien6796, 4/9/20.

  1. hien6796 PageRank 0 Member

    Tham gia ngày:
    6/3/19
    Nơi ở:
    Q.9, TP.HCM
    [​IMG]

    File robots.txt là gì?

    • File robots.txt là một tập tin văn bản đơn giản có dạng .txt. Tệp này là một phần của Robots Exclusion Protocol (REP) chứa một nhóm các tiêu chuẩn web quy định cách robot web (hoặc robot của các công cụ tìm kiếm) thu thập dữ liệu trên web, truy cập, index nội dung và cung cấp nội dung đó cho người dùng.

    • Trên thực tế, tạo file robots.txt cho wordpress giúp các nhà quản trị web link hoạt, chủ động hơn trong việc cho phép hay không cho các con bot của công cụ tìm kiếm index một số phần nào đó trong trang web của mình.

    Cú pháp của tệp robots.txt

    • User-agent
    • Disallow
    • Allow (chỉ áp dụng cho bọ tìm kiếm Googlebot)
    • Crawl-delay
    • Sitemap

    Bài viết này sẽ hướng dẫn cho bạn:

    • Hiểu rõ khái niệm robots.txt là gì
    • Cấu trúc cơ bản của một file robots.txt
    • Có những lưu ý gì khi tạo lập robots.txt
    • Tại sao phải cần robots.txt cho website của bạn
    • Cách tạo lập 1 file hoàn chỉnh cho web của bạn

    >>> Xem tại đây: https://gtvseo.com/robots-txt-la-gi/


    #robots_txt_la_gi #gtv_seo #tạo_file_robots.txt_cho_wordpress
     
    #1
  2. kinhcuonglucvinh PageRank 0 Member

    Tham gia ngày:
    4/9/20
    Nơi ở:
    Nghệ An
    Kính : Thường được sử dụng làm lan can và mặt bậc cầu thang. Chúng có độ dày từ 1-1,2 cm . Lan can cầu thang có tác dụng bảo vệ người khi di chuyển trên cầu thang.
     
    #2

Chia sẻ trang này