File robot là một dạng file đơn giản được tạo ra bằng công cụ notepad nó cho phép Google có thể thu thập dữ liệu của một website. Vậy làm thế nào để tạo file robots txt trên Blogspot? Hãy để Daotaoseo88 hướng dẫn tạo file robots txt cho các bạn qua bài viết này nhé.
Có thể bạn quan tâm:
Thì để có thể tại được một file robots đầu tiên các bạn cần phải mở chức năng Robots tùy chỉnh trên Blogspot. Để mở hãy truy cập vào trang quản trị và vào phần Cài đặt > Tùy chọn tìm kiếm và kéo xuống phía dưới có phần tùy chỉnh file robots hãy click vào và mở chức năng của nó lên.
Bài viết liên quan:
Cấu trúc của một file robots.txt chuẩn:
User-agent: *
Allow: /
Disallow: /search
Trong đó:
User-agent: cho phép con bọ của các công cụ tìm kiếm có thể vào blogspot của mình. Nếu bạn cho phép tất cả thì nên để dấu *
Allow: / cho phép các công cụ tìm kiếm index toàn bộ nội dung của trang
Disallow: /search báo với bộ máy tìm kiếm là không nên tò mò về nội dung của trang này và không được index chúng.
Với những đoạn mã trên khi bạn tạo xong thì hãy chèn chúng vào trong hộp thoại Robots tùy chỉnh và lưu lại. Như vậy là đã hoàn thành một file robots.txt hoàn chỉnh cho Blogspot
Nếu như đọc đến đây và các bạn thắc mắc rằng sitemap trong bài viết đó là gì thì xin thưa rằng đó là nội dung tiếp theo mà mình sẽ hướng dẫn cho các bạn trong tuần sau. Còn bây giờ mình xin kết thúc bài hướng dẫn tạo file robots txt. Nếu các bạn thấy hữu ích thì hãy share cho mọi người cùng biết