Tệp robots.txt chuẩn cho blogspot năm 2018

Tệp robots.txt chuẩn cho blogspot năm 2018

Tệp robots.txt chuẩn cho blogspot năm 2018

Để tạo sitemap khai báo cho googel index thì ta phải tạo tệp robots.txt tôi đã có hướng dẫn các bạn xem lại tại đây. Hôm nay tôi sẽ tiếp tục chia sẻ cập nhật mới nhất về tệp robots.txt chuẩn cho blogspot năm 2018 cho mọi người tham khảo, tệp này chặn một link không đẹp trên google tìm kiếm.

1. Tệp robots.txt cho blog dưới 500 bài:

User-agent: Mediapartners-Google Disallow: User-agent: * Allow: / Allow: /search/label/ Disallow: *max-results=* Disallow: *archive.html Disallow: *?m=0 Disallow: /search?* Disallow: *?showComment=* Disallow: *?spref=fb Disallow: *?spref=tw Disallow: *?spref=gp Disallow: *?utm_source=* Sitemap: ĐỊA CHỈ BLOG/feeds/posts/default?orderby=UPDATED Sitemap: ĐỊA CHỈ BLOG/atom.xml?redirect=false&start-index=1&max-results=500

2. Tệp robots.txt với những blog trên 500 bài:

User-agent: Mediapartners-Google Disallow: User-agent: * Allow: / Allow: /search/label/ Disallow: *max-results=* Disallow: *archive.html Disallow: *?m=0 Disallow: /search?* Disallow: *?showComment=* Disallow: *?spref=fb Disallow: *?spref=tw Disallow: *?spref=gp Disallow: *?utm_source=* Sitemap: ĐỊA CHỈ BLOG/feeds/posts/default?orderby=UPDATED Sitemap: ĐỊA CHỈ BLOG/atom.xml?redirect=false&start-index=1&max-results=500 Sitemap: ĐỊA CHỈ BLOG/atom.xml?redirect=false&start-index=501&max-results=500 Sitemap: ĐỊA CHỈ BLOG/atom.xml?redirect=false&start-index=1001&max-results=500 Sitemap: ĐỊA CHỈ BLOG/atom.xml?redirect=false&start-index=1501&max-results=500

* Lời kết:

Tôi vừa chia sẻ cập nhật tệp robots.txt chuẩn cho blogspot năm 2018, nếu như gặp bất cứ vấn đề nào hoặc thắc mắc gì trong khi thực hiện thì hãy để lại bình luận trong bài viết này nhé!

Nguồn: Tham khảo.