• WordPress
    • Tất cả
    • Lỗi Wordpress thường gặp
    • WordPress PLUGINS
    • WordPress SEO
    • WordPress THEMES

    EXAMPLEARTICLE

    EXAMPLEARTICLE

    EXAMPLEARTICLE

    Exploring Dating Trends and Platforms

    Exploring Dating Trends and Platforms

    Free Trade Signals Telegram ➤ Join Top Crypto Trading Group Now

    Hướng dẫn tắt chức năng comment trong wordpress

    Mẹo sử dụng Ping list hiệu quả để tăng tốc độ index google

    Mẹo sử dụng Ping list hiệu quả để tăng tốc độ index google

    9 Plugin tạo bài quiz đố vui tốt nhất cho WordPress (2020)

    9 Plugin tạo bài quiz đố vui tốt nhất cho WordPress (2020)

    Trending Tags

      • WordPress PLUGINS
      • WordPress SEO
      • WordPress THEMES
    • Công cụ
      7 công cụ tạo tên blog tốt nhất giúp bạn tìm ý tưởng cho tên blog WordPress

      7 công cụ tạo tên blog tốt nhất giúp bạn tìm ý tưởng cho tên blog WordPress

      Hướng dẫn sử dụng FOMO trên trang web WordPress để tăng lượt chuyển đổi

      Hướng dẫn sử dụng FOMO trên trang web WordPress để tăng lượt chuyển đổi

      Thiết lập dịch vụ đặt hàng trực tuyến trong WordPress

      Cách thiết lập dịch vụ đặt hàng trực tuyến cho nhà hàng với WordPress

      Các công cụ cần thiết cho một lớp học trực tuyến WordPress

      Các công cụ cần thiết cho một lớp học trực tuyến WordPress

      7 công cụ kiểm tra Backlink tốt nhất

      7 công cụ kiểm tra Backlink tốt nhất

      Cách tạo bố cục WordPress tùy chỉnh với Elementor

      Cách tạo bố cục WordPress tùy chỉnh với Elementor

      Hướng dẫn tối ưu hóa hình ảnh cho WordPress mà không làm giảm chất lượng ảnh

      Hướng dẫn tối ưu hóa hình ảnh cho WordPress mà không làm giảm chất lượng ảnh

      So sánh 6 phần mềm kế toán tốt nhất cho doanh nghiệp vừa và nhỏ

      So sánh 6 phần mềm kế toán tốt nhất cho doanh nghiệp vừa và nhỏ

      Hướng dẫn chặn thực thi PHP tại một thư mục cụ thể để bảo mật website WordPress

      Hướng dẫn chặn thực thi PHP tại một thư mục cụ thể để bảo mật website WordPress

      • Design
    • Hosting

      FTP là gì? hướng dẫn tạo tài khoản ftp trên hosting

      Pasted 81 1

      WooCommerce Hosting tốt nhất năm 2020 (đánh giá và kiểm tra hiệu suất)

      Hướng dẫn cách cài đặt WordPress lên hosting 2020

      Hướng dẫn cách cài đặt WordPress lên hosting 2020

      Hướng dẫn cách lưu trữ trang web đơn giản cho người mới bắt đầu

      Hướng dẫn cách lưu trữ trang web đơn giản cho người mới bắt đầu

      Huong Dan Tang Maximum Size Khi Upload File Tren Wordpress 49146

      Hướng dẫn tăng kích thước file tối đa khi upload trên WordPress

      Luu Ban Nhap Tu Dong 15826

      Cách cài đặt WordPress trên hệ điều hành Windows bằng WAMP

      Hướng dẫn tải hàng loạt file media WordPress qua FTP

      Hướng dẫn tải hàng loạt file media WordPress qua FTP

      9 plugin tốt nhất giúp bạn di chuyển website WordPress sang host mới (Plugin Migration)

      9 plugin tốt nhất giúp bạn di chuyển website WordPress sang host mới (Plugin Migration)

      Cách khắc phục lỗi  403 Forbidden trong WordPress

      Cách khắc phục lỗi 403 Forbidden trong WordPress

      • Domain Hosting
    • News
      chuyen-doi-so-la-gi

      Chuyển đổi số là gì? Giới thiệu 3 phần mềm chuyển đổi số hiệu quả

      Top 7 chủ đề blog giúp kiếm tiền online hot nhất năm 2020

      Top 7 chủ đề blog giúp kiếm tiền online hot nhất năm 2020

      share-plugin-wordpress-wp-rocket

      [Share Plugin WordPress] WP Rocket bản mới nhất – Cập nhật liên tục

      So sánh 15 nền tảng CMS phổ biến nhất năm 2020

      So sánh 15 nền tảng CMS phổ biến nhất năm 2020

      So sánh 6 phần mềm kế toán tốt nhất cho doanh nghiệp vừa và nhỏ

      So sánh 6 phần mềm kế toán tốt nhất cho doanh nghiệp vừa và nhỏ

      So sánh ưu, nhược điểm giữa Wix và WordPress

      So sánh ưu, nhược điểm giữa Wix và WordPress

      Hướng dẫn xóa bộ nhớ Cache trong website WordPress

      Hướng dẫn xóa bộ nhớ Cache trong website WordPress

    Cùng Học WordPress
    • WordPress
      • Tất cả
      • Lỗi Wordpress thường gặp
      • WordPress PLUGINS
      • WordPress SEO
      • WordPress THEMES

      EXAMPLEARTICLE

      EXAMPLEARTICLE

      EXAMPLEARTICLE

      Exploring Dating Trends and Platforms

      Exploring Dating Trends and Platforms

      Free Trade Signals Telegram ➤ Join Top Crypto Trading Group Now

      Hướng dẫn tắt chức năng comment trong wordpress

      Mẹo sử dụng Ping list hiệu quả để tăng tốc độ index google

      Mẹo sử dụng Ping list hiệu quả để tăng tốc độ index google

      9 Plugin tạo bài quiz đố vui tốt nhất cho WordPress (2020)

      9 Plugin tạo bài quiz đố vui tốt nhất cho WordPress (2020)

      Trending Tags

        • WordPress PLUGINS
        • WordPress SEO
        • WordPress THEMES
      • Công cụ
        7 công cụ tạo tên blog tốt nhất giúp bạn tìm ý tưởng cho tên blog WordPress

        7 công cụ tạo tên blog tốt nhất giúp bạn tìm ý tưởng cho tên blog WordPress

        Hướng dẫn sử dụng FOMO trên trang web WordPress để tăng lượt chuyển đổi

        Hướng dẫn sử dụng FOMO trên trang web WordPress để tăng lượt chuyển đổi

        Thiết lập dịch vụ đặt hàng trực tuyến trong WordPress

        Cách thiết lập dịch vụ đặt hàng trực tuyến cho nhà hàng với WordPress

        Các công cụ cần thiết cho một lớp học trực tuyến WordPress

        Các công cụ cần thiết cho một lớp học trực tuyến WordPress

        7 công cụ kiểm tra Backlink tốt nhất

        7 công cụ kiểm tra Backlink tốt nhất

        Cách tạo bố cục WordPress tùy chỉnh với Elementor

        Cách tạo bố cục WordPress tùy chỉnh với Elementor

        Hướng dẫn tối ưu hóa hình ảnh cho WordPress mà không làm giảm chất lượng ảnh

        Hướng dẫn tối ưu hóa hình ảnh cho WordPress mà không làm giảm chất lượng ảnh

        So sánh 6 phần mềm kế toán tốt nhất cho doanh nghiệp vừa và nhỏ

        So sánh 6 phần mềm kế toán tốt nhất cho doanh nghiệp vừa và nhỏ

        Hướng dẫn chặn thực thi PHP tại một thư mục cụ thể để bảo mật website WordPress

        Hướng dẫn chặn thực thi PHP tại một thư mục cụ thể để bảo mật website WordPress

        • Design
      • Hosting

        FTP là gì? hướng dẫn tạo tài khoản ftp trên hosting

        Pasted 81 1

        WooCommerce Hosting tốt nhất năm 2020 (đánh giá và kiểm tra hiệu suất)

        Hướng dẫn cách cài đặt WordPress lên hosting 2020

        Hướng dẫn cách cài đặt WordPress lên hosting 2020

        Hướng dẫn cách lưu trữ trang web đơn giản cho người mới bắt đầu

        Hướng dẫn cách lưu trữ trang web đơn giản cho người mới bắt đầu

        Huong Dan Tang Maximum Size Khi Upload File Tren Wordpress 49146

        Hướng dẫn tăng kích thước file tối đa khi upload trên WordPress

        Luu Ban Nhap Tu Dong 15826

        Cách cài đặt WordPress trên hệ điều hành Windows bằng WAMP

        Hướng dẫn tải hàng loạt file media WordPress qua FTP

        Hướng dẫn tải hàng loạt file media WordPress qua FTP

        9 plugin tốt nhất giúp bạn di chuyển website WordPress sang host mới (Plugin Migration)

        9 plugin tốt nhất giúp bạn di chuyển website WordPress sang host mới (Plugin Migration)

        Cách khắc phục lỗi  403 Forbidden trong WordPress

        Cách khắc phục lỗi 403 Forbidden trong WordPress

        • Domain Hosting
      • News
        chuyen-doi-so-la-gi

        Chuyển đổi số là gì? Giới thiệu 3 phần mềm chuyển đổi số hiệu quả

        Top 7 chủ đề blog giúp kiếm tiền online hot nhất năm 2020

        Top 7 chủ đề blog giúp kiếm tiền online hot nhất năm 2020

        share-plugin-wordpress-wp-rocket

        [Share Plugin WordPress] WP Rocket bản mới nhất – Cập nhật liên tục

        So sánh 15 nền tảng CMS phổ biến nhất năm 2020

        So sánh 15 nền tảng CMS phổ biến nhất năm 2020

        So sánh 6 phần mềm kế toán tốt nhất cho doanh nghiệp vừa và nhỏ

        So sánh 6 phần mềm kế toán tốt nhất cho doanh nghiệp vừa và nhỏ

        So sánh ưu, nhược điểm giữa Wix và WordPress

        So sánh ưu, nhược điểm giữa Wix và WordPress

        Hướng dẫn xóa bộ nhớ Cache trong website WordPress

        Hướng dẫn xóa bộ nhớ Cache trong website WordPress

      Cùng Học WordPress

      Hướng dẫn tạo file Robots.txt WordPress để tối ưu cho SEO

      Hathao được đăng bởi Hathao
      16/06/2020
      trong chuyên mục WordPress
      0 0
      0
      Huong Dan Tao File Robots Txt Wordpress De Toi Uu Cho Seo 86314 7
      0
      CHIA SẺ
      90
      LƯỢT XEM
      Share on FacebookShare on Twitter

      Robots.txt là một tệp tin cung cấp hướng dẫn cho các công cụ tìm kiếm cách thu thập dữ liệu trang web của bạn. Điều này giúp nó trở thành một công cụ SEO vô cùng hiệu quả. Trong bài viết này, chúng tôi sẽ hướng dẫn bạn cách tạo tệp robots.txt tối ưu cho SEO.

      tao-file-robots-txt-wordpress-de-toi-uu-cho-seo

      File robots.txt là gì?

      Robots.txt là một file dạng text cho phép bạn chặn các bot và từ chối các công cụ tìm kiếm truy cập vào các tệp và thư mục nhất định.

      Bạn có thể tìm thấy file robots.txt ở thư mục gốc của website hay còn gọi là folder chính của website đó. Về cơ bản, một file robots.txt sẽ có dạng như sau:

      1. User-agent: [user-agent name]
      2. Disallow: [URL string not to be crawled]
      3. User-agent: [user-agent name]
      4. Allow: [URL string to be crawled]
      5. Sitemap: [URL of your XML Sitemap]

      Bạn có thể thêm nhiều dòng khác vào đoạn code trên để cho phép hoặc từ chối các URL cụ thể và thêm nhiều sitemap khác. Nếu bạn từ chối một URL, các bot tìm kiếm sẽ được phép thu thập tất cả mọi thứ trên website đó.

      Đây là ví dụ về một file robots.txt:

      1. User-Agent: *
      2. Allow: /wp-content/uploads/
      3. Disallow: /wp-content/plugins/
      4. Disallow: /wp-admin/
      5. Sitemap: https://example.com/sitemap_index.xml
      Trong ví dụ về  robots.txt ở trên, chúng tôi đã cho phép các công cụ tìm kiếm thu thập thông tin và index file có trong thư mục upload của WordPress.

      Sau đó, chúng tôi lại không cho phép các bot thu thập thông tin và index file các plugin và thư mục quản trị WordPress.

      Cuối cùng chúng tôi đã cung cấp sitemap URL của trang web

      Trang web WordPress của bạn có cần một file Robots.txt không?

      Nếu không có file robots.txt thì các công cụ tìm kiếm vẫn sẽ thu thập dữ liệu và index trang web của bạn. Tuy nhiên, bạn không thể thông báo cho các bot những trang hoặc công cụ bạn không muốn lộ thông tin.

      Nếu bạn là một người mới và đang bắt đầu xây dựng một blog chưa có nhiều nội dung thì không cần phải lo lắng.

      Khi trang web của bạn phát triển và có thêm nhiều nội dung thì bạn sẽ muốn kiểm soát số lượng thông tin trang web bị thu thập và index.

      Đây là lý do tại sao file robots.txt lại quan trọng như vậy.

      Các bot tìm kiếm có một hạn ngạch thu thập dữ liệu nhất định cho mỗi trang web.

      Điều này có nghĩa là chúng thu thập dữ liệu một số trang nhất định trong một phiên thu thập dữ liệu. Nếu vẫn chưa thu thập xong dữ liệu của tất cả các page thì lần sau nó sẽ quay lại và tiếp tục công việc.

      Điều này có thể gây ảnh hưởng và làm chậm tốc độ index của trang web.

      Để khắc phục điều này bạn có thể disallow một số page không cần thiết như trang quản trị WordPress, tệp plugin và thư mục theme.

      Bằng cách disallow một số trang không cần thiết, bạn lưu chỉ tiêu thu thập dữ liệu của mình. Điều này giúp các bot thu thập dữ liệu bớt được các trang không cần thiết và index chúng càng nhanh càng tốt.

      Một lý do chính đáng khác để sử dụng file robots.txt là bạn muốn ngăn các công cụ tìm kiếm không index một số bài đăng hoặc trang nào đó trên website của bạn.

      Đây không phải là cách an toàn nhất để ẩn nội dung nhưng sẽ ngăn chúng xuất hiện trên công cụ tìm kiếm.

      File Robots.txt lý tưởng trông như thế nào?

      Nhiều blog phổ biến sử dụng các file robots.txt khá đơn giản. Mỗi trang web có một nội dung khác nhau tùy thuộc nhu cầu cụ thể:

      1. User-agent: *
      2. Disallow:
      3. Sitemap: http://www.example.com/post-sitemap.xml
      4. Sitemap: http://www.example.com/page-sitemap.xml

      File robots.txt cho phép tất cả các bot index tất cả các nội dung và cung cấp một sitemap XML.

      Đối với các trang web WordPress, chúng tôi gợi ý bạn sử dụng file robots.txt như sau:

      1. User-Agent: *
      2. Allow: /wp-content/uploads/
      3. Disallow: /wp-content/plugins/
      4. Disallow: /wp-admin/
      5. Disallow: /readme.html
      6. Disallow: /refer/
      7. Sitemap: http://www.example.com/post-sitemap.xml
      8. Sitemap: http://www.example.com/page-sitemap.xml

      Điều này cho phép các bot tìm kiếm index tất cả hình ảnh và tệp WordPress, đồng thời disallows các tệp plugin, khu vực quản trị WordPress, tệp readme và liên kết affiliate.

      Hãy nhớ thêm sitemap vào file robots.txt để các bot của Google dễ dàng thu thập tất cả các trang có trên website.

      Bây giờ bạn đã biết một file robots.txt cơ bản là gì và cấu trúc của file robots.txt trong WordPress trông như thế nào.

      Làm thế nào để tạo file Robots.txt trong WordPress?

      Có hai cách để tạo file robots.txt trong WordPress. Bạn có thể chọn một cách phù hợp nhất với bạn.

      Cách 1: Chỉnh sửa file Robots.txt bằng Yoast SEO

      Nếu bạn đang sử dụng plugin Yoast SEO thì nó đi kèm trình tạo file robots.txt.

      Bạn có thể tạo và chỉnh sửa trực tiếp file robots.txt từ khu vực quản trị WordPress của mình.

      Bạn chỉ cần truy cập trang SEO » Tools trong khu vực quản trị WordPress và nhấp vào link File Editor.

      tao-file-robots-txt-wordpress-de-toi-uu-cho-seo

      Ngay sau đó, Yoast SEO sẽ hiển thị file robots.txt mà bạn có.

      Nếu không có file robots.txt thì Yoast SEO sẽ tạo một file robots.txt mới cho bạn.

      Pasted

      Theo mặc định, Yoast SEO sẽ thêm các quy tắc sau vào file robots.txt của bạn:

      1. User-agent: *
      2. Disallow: /

      Điều quan trọng là rule trên sẽ chặn tất cả các công cụ tìm kiếm thu thập dữ liệu trang web của bạn. Do vậy, bạn cần xóa đoạn trên.

      Sau khi xóa văn bản mặc định, bạn có thể tiếp tục và thêm quy tắc robots.txt của riêng mình. Chúng tôi khuyên bạn nên sử dụng định dạng robots.txt lý tưởng mà chúng tôi đã chia sẻ ở trên.

      Khi bạn đã hoàn tất, đừng quên nhấp vào nút ‘Save robots.txt file’ để lưu các thay đổi.

      Cách 2. Chỉnh sửa file Robots.txt bằng cách thủ công sử dụng FTP

      Với phương pháp này bạn cần sử dụng phần mềm kết nối FTP để chỉnh sửa file robots.txt.

      Sau khi kết nối với hosting WordPress, bạn sẽ tìm thấy file robots.txt trong thư mục gốc của website.

      tao-file-robots-txt-wordpress-de-toi-uu-cho-seo

      Nếu bạn không thấy thì hãy tạo một file robots.txt mới.

      tao-file-robots-txt-wordpress-de-toi-uu-cho-seo

      Robots.txt là một file văn bản, bạn có thể tải nó xuống máy tính và chỉnh sửa bằng bất kỳ trình soạn thảo văn bản đơn giản nào như Notepad hoặc TextEdit.

      Sau khi lưu các thay đổi, bạn có thể upload nó trở lại thư mục folder của trang web.

      Làm thế nào để kiểm tra file Robots.txt?

      Sau khi đã tạo file robots.txt file, bạn cũng sẽ cần kiểm tra nó bằng công cụ robots.txt tester tool.

      Hiện này có nhiều công cụ giúp bạn kiểm tra tệp robots.txt, nhưng phổ biến hơn cả là sử dụng chính Google Search Console.

      Bạn cần đăng nhập vào tài khoản Google Search Console & chuyển sang giao diện webmaster cũ.

      tao-file-robots-txt-wordpress-de-toi-uu-cho-seo

      Điều này sẽ đưa bạn đến giao diện Google Search Console cũ. Tại đây, bạn khởi chạy công cụ robots.txt tester tool trong menu ‘Crawl’.

      tao-file-robots-txt-wordpress-de-toi-uu-cho-seo

      Công cụ này sẽ tự động tìm nạp tệp robots.txt, kiểm tra và tìm ra các lỗi có trên file robots.txt của bạn sau đó đưa ra cảnh báo.

      Kết luận

      Mục tiêu cuối cùng khi tối ưu file robots.txt đó là ngăn công cụ tìm kiếm thu thập dữ liệu các trang không công khai. Ví dụ: các trang trong thư mục wp-plugins hoặc các trang trong thư mục quản trị viên WordPress của bạn.

      Một mẹo nhỏ của các chuyên gia SEO là việc chặn danh mục WordPress, thẻ và các trang lưu trữ sẽ cải thiện tốc độ thu thập dữ liệu và kết quả index nhanh hơn và xếp hạng cao hơn.

      Điều này không đúng. Nó cũng chống lại nguyên tắc quản trị trang web của google.

      Bạn nên làm theo định dạng robots.txt ở trên để tạo file robots.txt cho trang web của mình.

      Chúng tôi hi vọng bài viết này giúp bạn hiểu file robots.txt là gì và cách tạo file robots.txt tối ưu cho SEO. Bạn cũng có thể muốn xem hướng dẫn SEO WordPress của chúng tôi và và các công cụ SEO WordPress tốt nhất để phát triển trang web của bạn.

      Nếu thích bài viết này, đừng quên theo dõi YouTube Channel để xem các video hướng dẫn về WordPress. Bạn cũng có thể tìm kiếm chúng tôi trên Twitter và Facebook.

      Like this:

      Like Đang tải...
      Thẻ : File Robots.txttối ưu SEO
      • Xu Hướng
      • Bình luận
      • Mới nhất
      Hướng dẫn cho phép đăng ký tài khoản trên WordPress

      Hướng dẫn cho phép đăng ký tài khoản trên WordPress

      21/05/2020
      Hướng dẫn sử dụng trình chỉnh sửa Block Editor mới trên WordPress (Gutenberg)

      Hướng dẫn sử dụng trình chỉnh sửa Block Editor mới trên WordPress (Gutenberg)

      09/07/2020
      PDF

      Cách upload file PDF lên trang web WordPress

      11/06/2020

      EXAMPLEARTICLE

      0
      Hướng dẫn cài đặt WordPress trên Amazon Web Services

      Hướng dẫn cài đặt WordPress trên Amazon Web Services

      0
      Hướng dẫn cách hạn chế không cho phép điền form đối với người dùng không đăng nhập

      Hướng dẫn cách hạn chế không cho phép điền form đối với người dùng không đăng nhập

      0
      Cách tạo giỏ hàng cho người dùng trên WordPress bằng cách dùng BigCommerce

      Cách tạo giỏ hàng cho người dùng trên WordPress bằng cách dùng BigCommerce

      0

      EXAMPLEARTICLE

      06/02/2025

      EXAMPLEARTICLE

      16/01/2025

      EXAMPLEARTICLE

      16/01/2025

      Exploring Dating Trends and Platforms

      19/09/2024
      QUẢNG CÁO

      Bài viết mới nhất

      EXAMPLEARTICLE

      06/02/2025

      EXAMPLEARTICLE

      16/01/2025

      EXAMPLEARTICLE

      16/01/2025

      Exploring Dating Trends and Platforms

      19/09/2024

      Exploring Dating Trends and Platforms

      29/08/2024


      Cùng Học WP blog chia sẻ kiến thức học tập về WordPress, Hosting, Marketing, SEO, MMO miễn phí. Phương châm của cunghocwp.com là cho đi giá trị.

      Liên Hệ Cùng Học WP

      Mọi thông tin liên hệ về Cùng Học WP mời các bạn liên hệ trực tiếp chúng tôi theo các thông tin sau:

          • Hotline: 0973.666.777
          • Email: lienhe@cunghocwp.com
          • Địa chỉ: 387 Nguyễn Đình Chiểu, Phường 5, Quận 3, Hồ Chí Minh

      © 2020 – Cùng Học WordPress. All Right Reserved.

      Về chúng tôi  /  Liên hệ  /  Chính sách bảo mật  /  Quy định sử dụng

      • WordPress
        • WordPress PLUGINS
        • WordPress SEO
        • WordPress THEMES
      • Công cụ
        • Design
      • Hosting
        • Domain Hosting
      • News

      © 2025 JNews - Premium WordPress news & magazine theme by Jegtheme.

      Xin Chào !

      Đăng nhập vào tài khoản của bạn bên dưới

      Đã quên mật khẩu?

      Tạo tài khoản mới!

      Điền vào các mẫu dưới đây để đăng ký

      Tất cả các trường đều được yêu cầu. Đăng nhập

      Truy xuất mật khẩu của bạn

      Vui lòng nhập tên người dùng hoặc địa chỉ email của bạn để đặt lại mật khẩu của bạn.

      Đăng nhập
      %d bloggers like this:
        Close