Trong vài ngày vừa qua, Google đã đồng loạt gửi hàng loạt email đến để thông báo website đến các người dùng đang chặn Google Bot truy cập các tập tin CSS và Javascript. chúng ta cần nên biết tại sao Google lại thông báo như vậy.
Google Bot truy cập vào website theo các thuật toán riêng của nó quy định, nhưng chúng ta có thể kiểm soát việc lấy dữ liệu của Google Bot thông qua tập tin robots.txt. Do vậy, thông báo này có nghĩa là một hoặc các tập tin CSS/JS trên website đang bị chặn bởi tập tinh robots.txt nên Google Bot sẽ không truy cập được. Hiện tượng này có thể là do website bạn chặn thư mục nào đó.
Vì vậy chúng ta nên cho phép Google Bot truy cập các tập tin CSS và Javascript thì chỉ cần khai báo thêm đoạn sau vào robots.txt của website.
Allow: /*.js$ Allow: /*.css$
sau khi thêm dòng đó vào, website mình không còn chặn Google Bot xem CSS và JS trên website nữa.
Chúc các bạn thành công
chia sẻ rất có ích
ReplyDelete