Sử dụng Robots.txt để tối ưu SEO hiệu quả trên Blogspot

mất:

6 phút, 42 giây để đọc.

Những kiến thức về tối ưu SEO khá nhiều đối với các bài viết blog. Một trong số đó phải kể đến là việc sử dụng Robots.txt. File Robots.txt sẽ chịu trách nhiệm hướng dẫn công cụ tìm kiếm. Đồng thời, tự đống đến những trang nào mà bạn muốn tiến hành tìm kiếm và index trang đó. Nếu sử dụng sai file thì sẽ khiến cho các công cụ kìm kiếm bỏ qua bài viết của bạn. Vì thế, việc sử dụng file Robots.txt cho Blogspot sẽ rất quan trọng. Hơn hết, chúng cực kỳ tốt cho SEO bài viết blog.

Nếu bạn đang tự hỏi là làm thế nào để tối ưu SEO hiệu quả trên Blogspot thì đó chính là việc sử dụng Robots.txt. Trong bài viết dưới đây seotop xin chia sẻ về loại tệp Robots.txt này. Ngoài ra, sẽ giới thiệu bạn sử dụng file hợp lý để cải thiện thứ hạng tìm kiếm trên Google.

Tìm hiểu về Robots.txt là gì?

Robots.txt là một tệp văn bản trên máy chủ. Tệp này có thể giúp người dùng blog tạo thư mục, trang web hoặc liên kết. Nhưng nó sẽ không xuất hiện trong kết quả tìm kiếm. Điều này có nghĩa là bạn có thể hạn chế các công cụ tìm kiếm thu thập thông tin đến các thư mục. Đồng thời, liên kết nhất định trên các trang web hoặc blog..

Hiện tại, người dùng có thể tùy chỉnh Robots.txt trên trang web Blogger của họ. Trong các tùy chọn tìm kiếm, Blogger thường liên quan đến thẻ và tiêu đề của bài đăng. Vì vậy nếu người dùng không sử dụng thẻ và tiêu đề chính xác trên mỗi bài đăng, việc thu thập liên kết tìm kiếm sẽ không thể tiến hành một cách hiệu quả.

Tìm hiểu về Robots.txt là gì?Tìm hiểu về Robots.txt là gì?

Theo mặc định, các liên kết tìm kiếm trên trang web Blogger sẽ không được phép thu thập thông tin người dùng. Ngoài ra, trong tệp Robots.txt này, bạn cũng có thể tạo vị trí của tệp sơ đồ trang web. Sơ đồ trang web là một tệp máy chủ chứa tất cả các liên kết cố định của một trang web hoặc blog. Nó chủ yếu là một sơ đồ trang web ở định dạng XML, cụ thể là sitemap.xml.

Cách sử dụng Robots.txt của một trang web để SEO tốt hơn

Bây giờ chúng ta hãy thảo luận về cách thực sự truy cập (hoặc tạo) và tối ưu hóa tệp Robots.txt của trang web. Robots.txt thường nằm trong thư mục gốc của trang web của bạn. Bạn sẽ cần sử dụng ứng dụng FTP hoặc sử dụng trình quản lý tệp của cPanel để kết nối với trang web của bạn để xem nó.

Nó chỉ là một tập tin văn bản thông thường, bạn có thể mở nó bằng Notepad. Nếu không có tệp robot.txt trong thư mục gốc của trang web của bạn, bạn có thể tạo một tệp. Tất cả những gì bạn cần làm là tạo một tệp văn bản mới trên máy tính của mình. Sau đó, lưu nó dưới dạng tệp Robots.txt. Cuối cùng, chỉ cần tải nó lên thư mục gốc của trang web của bạn.

Các loại Robots.txt hiện nay

Hiện tại, Blogger nằm trên sitemap.xml và sẽ thu thập thông tin các mục. Sơ đồ trang web thông qua các nguồn cấp dữ liệu cũng sẽ được lưu lại thông tin. Bằng cách này, 25 bài đăng mới nhất trên trang blog của bạn sẽ được gửi đến các công cụ tìm kiếm. Nếu bạn muốn công cụ tìm kiếm chỉ xử lý 25 bài đăng gần đây nhất. Bạn nên sử dụng loại 1 Robots.txt (tôi sẽ trình bày bên dưới). Nếu bạn sử dụng loại Robots.txt này, nó sẽ cho phép công cụ Google Adsense thu thập dữ liệu toàn bộ trang blog. Điều này amng đến cho Adsense một hiệu suất làm việc tốt nhất.

Sử dụng Robots.txt loại 1 để tối ưu SEO hiệu quả

Người dùng có thể có những thay đổi file Robots.txt mặc định của trang Blogspot như sau:

ser-agent: Mediapartners-Google
Disallow: 
User-agent: *
Disallow: /search
Disallow: /b
Allow: /
Sitemap: https://www.seotop.vn/sitemap.xml
Sử dụng Robots.txt loại 1 để tối ưu SEO một cách hiệu quảSử dụng Robots.txt loại 1 để tối ưu SEO một cách hiệu quả

Robots.txt loại 2 áp dụng với nhiều bài đăng

Nếu bạn muốn công cụ tìm kiếm thu thập thông tin 500 bài đăng mới nhất trên trang blog. Bạn nên sử dụng loại thứ 2 là Robots.txt. Nếu đã có hơn 500 bài đăng trên blog, bạn có thể thêm hàng sơ đồ trang bằng màu đỏ đậm.

User-agent: Mediapartners-Google
Disallow: 
User-agent: *
Disallow: /search
Disallow: /b
Allow: /
Sitemap: https://www.seotop.vn/feeds/posts/default?orderby=updated

Lưu ý: Một điểm quan trọng nhất đó chính là đừng quên thay đổi địa chỉ https://www.seotop.vn bằng địa chỉ blog của bạn hoặc tên miền tùy chỉnh.

Robots.txt loại 3 – Làm việc với dòng lệnh

User-agent: Mediapartners-Google
Disallow: 
User-agent: *
Disallow: /search
Disallow: /b
Allow: /
Sitemap: https://www.seotop.vn/atom.xml?redirect=false&start-index=1&max-results=500
Sitemap: https://www.seotop.vn/atom.xml?redirect=false&start-index=501&max

Lưu ý: Hãy đừng quên thay đổi địa chỉ https://www.seotop.vn bằng địa chỉ blog của bạn hoặc tên miền tùy chỉnh cho phù hợp nhé!

Công thức toán học của mục nhập sơ đồ trang web Robots.txt như sau:

Sitemap: https://www.seotop.vn/atom.xml?redirect=false&start-index=(m*0)+1&max-results=m
Sitemap: https://www.seotop.vn/atom.xml?redirect=false&start-index=(m*1)+1&max-results=m
Sitemap: https://www.seotop.vn/atom.xml?redirect=false&start-index=(m*2)+1&max-results=m
Sitemap: https://www.seotop.vn/atom.xml?redirect=false&start-index=(m*3)+1&max-results=m
.
.
.
Sitemap: https://www.seotop.vn/atom.xml?redirect=false&start-index=(m*n)+1&max-results=m

Trong đó thành phần m = 500 và n = 1, 2, 3, 4,…n. Nếu bạn đã có kinh nghiệm trong việc tối ưu hóa công cụ tìm kiếm (SEO), thì bạn có thể thực hiện xóa dòng lệnh disallow: /search. Còn nếu bạn không muốn các công cụ tìm kiếm thu thập dữ liệu. Cụ thể là từ một bài đăng hoặc một trang blogger nào đó thì hãy nhớ các dòng lệnh sau:

Đối với một bài đăng cụ thể thì thì cần thêm dòng sau:

Disallow: /yyyy/mm/post-name.html

Đối với một page cụ thể thì cần thêm dòng sau:

Disallow: /p/page-name.html

Những cách sử dụng và quản lý robot.txt tùy chỉnh trên Blogspot hiệu quả

Những cách sử dụng và quản lý robot.txt tùy chỉnh trên Blogspot hiệu quảNhững cách sử dụng và quản lý robot.txt tùy chỉnh trên Blogspot hiệu quả

Các bước thực hiện sử dụng và quản lý robot.txt như sau:

Bước 1: Bạn tiến hành truy cập vào trang quản lý Blogspot, và sau đó nhấn vào Cài đặt. Chọn Tùy chọn tìm kiếm và sau đó chọn Trình thu thập thông tin và lập chỉ mục.

Bước 2: Tại trong mục này, bạn phải nhấn vào dòng Robots.txt tùy chỉnh và chọn Chỉnh Sửa.

Bước 3: Ngay lúc này bạn nhấn cần vào ô Có cho câu hỏi Bật nội dung Robots.txt tùy chỉnh?. Điều này để chắc chắn thao tác sử dụng file Robots.txt.

Bước 4: Hãy nhập dữ liệu Robots.txt tùy chỉnh sẽ hiện ra bên dưới. Bạn chỉ cần nhập một trong 3 loại Robots.txt mẫu mà mình đã giới thiệu bên trên cho đúng rồi nhấn “Lưu thay đổi”.

Trên đây là cách hướng dẫn các bạn cách sử dụng Robots.txt tùy chỉnh trên Blogspot đơn giản nhất. Hy vòng bài viết này sẽ giúp ích cho bạn trong việc tối ưu SEO.

Nguồn: freetuts.net

Chia sẻ

Facebook

Twitter

Pinterest

LinkedIn

Email