Để chặn Google Bot lập chỉ mục một trang mà bạn cho rằng việc index là không có lợi hoặc không mang lại bất kì giá trị nào, bạn có thể làm được bằng nhiều cách, các cách đó có thể là:
Phần mềm Ninja xin hướng dẫn 1 số nội dung sau:
1. Thêm thẻ meta noindex vào header của trang, ví dụ:
<meta name="robots" content="noindex, follow">
Các bạn không lập chỉ mục, tuy nhiên nên để follow để robot sẽ đi theo các liên kết trên trang không lập chỉ mục và vẫn lập chỉ mục và xếp hạng cho các trang khác nhé !
2. Cách này liên quan tới PHP, các bạn có thể trả về mã Header là:
X-Robots: Noindex
3. Cách dễ dàng hơn và thuận tiện hơn cho việc chặn cả một thư mục, hoặc nếu CMS nào đó không cho phép bạn can thiệp sâu hơn thì có thể làm file robots.txt, hoặc can thiệp vào nội dung của nó như sau:
User-agent: * Disallow: /wp-admin/
Hoặc bất cứ thư mục nào bạn muốn, chỉ cần khai báo sau đó vào Google Webmaster > Thu thập dữ liệu > Kiểm tra Robots.txt:
Chúc các bạn thành công !
