Bạn đang trong quá trình hoàn thiện thiết kế trang web và không muốn trang web của mình được lập chỉ mục trên công cụ tìm kiếm?

Bài viết dưới đây sẽ hướng dẫn các bạn thực hiện ngăn chặn công cụ tìm kiếm lập chỉ mục trang web WordPress của mình.

Đầu tiên, ta tìm hiểu về hai lý do chính khiến bạn muốn ngăn chặn công cụ tìm kiếm lập chỉ mục trang web WordPress của mình:

• Bảo vệ nội dung: Nếu bạn có nội dung chưa hoàn thiện hoặc nhạy cảm trên trang web, bạn có thể muốn ngăn nó xuất hiện trong kết quả tìm kiếm cho đến khi bạn sẵn sàng.
• Ngăn chặn trùng lặp nội dung: Nếu bạn có nhiều trang web hoặc blog với nội dung tương tự, bạn có thể muốn ngăn chặn việc Google lập chỉ mục các trang trùng lặp để tránh làm giảm thứ hạng trang web của bạn.

Vậy làm cách nào để ngăn chặn công cụ tìm kiếm lập chỉ mục trang web WordPress của bạn? HOSTVN sẽ hướng dẫn bạn qua một số cách dưới đây, bạn có thể lựa chọn thực hiện 1 cách phù hợp nhất với mình.

1. Sử dụng tính năng sẵn có của WordPress:

WordPress đi kèm với một tính năng cho phép bạn ngăn các công cụ tìm kiếm không lập chỉ mục trang web của bạn. Để thực hiện việc này, hãy làm theo các bước sau:

1. Đăng nhập vào trang quản trị WordPress của bạn.
2. Vào Settings => chọn Reading
3. Cuộn xuống đến phần Search engine visibility       
4. Đánh dấu vào ô Discourage search engines from indexing this site
5. Nhấp vào nút Save changes (Lưu thay đổi)

Lưu ý: Việc chọn tùy chọn này sẽ tự động thêm các dòng sau vào tệp robots.txt của bạn:

User-agent: *

Disallow: /

Ngoài ra, bạn có thể: Mở thư mục cài đặt WordPress của bạn (vd  public_html ) và tìm file robots.txt . Nếu bạn không tìm thấy, hãy tạo mới file robots.txt với nội dung trống. Nhấp chuột phải vào tập tin và chọn Chỉnh sửa.

User-agent: *

Disallow: /

Đoạn mã trên sẽ ngăn chặn công cụ tìm kiếm lập chỉ mục toàn bộ trang web của bạn. file robots.txt là một tệp văn bản cho phép bạn hướng dẫn các công cụ tìm kiếm trang nào trên trang web của bạn mà họ có thể và không thể thu thập thông tin. Để tìm hiểu thêm về cách sử dụng file robots.txt, hãy truy cập:

https://developers.google.com/search/docs/crawling-indexing/robots/create-robots-txt?hl=vi

Chú ý: Hãy cẩn thận khi chỉnh sửa nội dung trong file robots.txt file nếu bạn không hiểu rõ về cú pháp.

2. Bảo vệ trang web của bạn bằng mật khẩu:

Nếu bạn chỉ muốn một số người nhất định có thể truy cập trang web của bạn, bạn có thể bảo vệ nó bằng mật khẩu. Điều này sẽ ngăn chặn các công cụ tìm kiếm thu thập thông tin trang web của bạn hoàn toàn.

Tìm đến thư mục Directory Privacy

Tiếp theo, chọn thư mục root. Trong trường hợp này, đó là public_html.

Bật tùy chọn Password protect this directory, và đặt tên cho thư mục được bảo vệ. Và Nhấn Save.

Ngoài ra, các bạn cũng có thể sử dụng các plugin như: Yoast SEO, All in One SEO Pack để ngăn công cụ tìm kiểm lập chỉ mục trang web của bạn, bao gồm khả năng ngăn chặn lập chỉ mục các trang và bài đăng cụ thể.

3. Xóa chỉ mục trang khỏi Google:

Nếu bạn chỉ muốn xóa một trang cụ thể khỏi chỉ mục của Google, bạn có thể sử dụng công cụ Xóa URL trong Google Search Console. https://search.google.com/search-console/about

Lưu ý: Việc ngăn chặn công cụ tìm kiếm lập chỉ mục trang web của bạn có thể ảnh hưởng đến lưu lượng truy cập trang web của bạn. Hãy cân nhắc kỹ lưỡng trước khi thực hiện bất kỳ hành động nào.