SEO cho Blogger: Hướng dẫn tối ưu hóa Robot.txt

Ngoài các chức năng seo khác, tối ưu hóa file robot.txt cũng rất quan trọng.

Theo các bài hướng dẫn về Blogger bạn đã có thể tự tạo và đăng bài viết trên Blog để post lên mạng toàn cầu, tuy nhiên nhiều bạn chưa hiểu và không quan tâm tới file Robot.txt trong Blogger. Bài viết này sẽ hướng dẫn bạn tối ưu hóa file Robot.txt

Robots.txt là gì?
Robots.txt là một giao thức với một nhóm nhỏ các lệnh chỉ (báo) cho trình thu thập web biết rằng nên truy cập những phần nào trong web và những phần nào trong web không được truy cập.
Tác dụng chính của robots.txt là chỉ thị và điều hướng Googlebot (bọ tìm kiếm tên gọi của thuật toán tìm kiếm) vào những thông tin quan trọng trong web.

Các bước thực hiện tối ưu hóa file robot.txt như sau:

Bước 1: Đăng nhập Blogger.com và truy cập và Blogspot của bạn
Bước 2: Click vào [Cài đặt]
Bước 3: Click chọn [Tùy chọn tìm kiếm] trong phần "cài đặt"
Bước 4: Click chọn [Trình thu thập thông tin và lập chỉ mục] bên phải của [Tùy chọn tìm kiếm]
Bước 5: Click chọn [Robots.txt tùy chỉnh] --->> [Bật nội dung robots.txt tùy chỉnh]
Bước 6: Copy đoạn code chuẩn robots.txt cho blogspot dưới này vào khung nhập text và sau đó nhấp [Lưu lại]

 

User-agent: Mediapartners-Google
Disallow:
User-agent: *
Allow: /
Disallow: /search
Disallow: /*?updated-max=*
Disallow: *archive.html

Lưu ý: Phần code Disallow: /search bạn có thể bỏ đi bởi chính sách SEO của Google bây giờ cho phép index cả trang Search Label này .