Trong blogger nó được gọi là tùy Robots.txt đó có nghĩa là bây giờ bạn có thể tùy chỉnh tập tin này theo sự lựa chọn của bạn. Trong ngày hôm nay, chúng tôi sẽ thảo luận về thuật ngữ này trong sâu và đến để biết về sử dụng và lợi ích của nó. Tôi cũng sẽ cho bạn biết làm thế nào để thêm tập tin robots.txt tùy chỉnh trong blogger.
Vì vậy, hãy bắt đầu hướng dẫn.
Robots.txt là gì?
Robots.txt là một tập tin văn bản, trong đó có vài dòng mã đơn giản. Nó được lưu trên các trang web hoặc máy chủ của blog này hướng dẫn các trình thu thập web để làm thế nào để chỉ mục và hiện blog của bạn trong kết quả tìm kiếm. Điều đó có nghĩa là bạn có thể hạn chế bất kỳ trang web trên blog của bạn từ trình thu thập web để nó không thể được lập chỉ mục trong công cụ tìm kiếm như trang nhãn blog của bạn, trang giới thiệu của bạn hoặc bất kỳ trang nào khác mà không phải là quan trọng để có được lập chỉ mục. Luôn luôn nhớ rằng trình thu thập tìm kiếm quét các tập tin robots.txt trước khi bò bất kỳ trang web.
Mỗi blog lưu trữ trên blogger có file robots.txt mặc định của nó mà là một cái gì đó giống như thế này:
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: / search
Allow: /
Sitemap: http://example.blogspot.com/feeds/posts/default?orderby=UPDATED
Giải trình
Mã này được chia thành ba phần. Hãy nghiên cứu đầu tiên mỗi trong số họ sau đó chúng ta sẽ tìm hiểu làm thế nào để thêm tập tin robots.txt tùy chỉnh trong blog blogspot.
- User-agent: Mediapartners-Google
- Đại lý người dùng: *
- Sitemap: http://example.blogspot.com/feeds/posts/default?orderby=UPDATED
Mã này là dành cho robot Google Adsense mà giúp họ để phục vụ quảng cáo tốt hơn trên blog của bạn. Hoặc là bạn đang sử dụng Google Adsense trên blog của bạn hay không chỉ đơn giản là để nó như nó là.
Điều này là dành cho tất cả các robot được đánh dấu bằng dấu hoa thị ( * ). Trong các thiết lập mặc định blog của chúng tôi của nhãn liên kết được hạn chế để lập chỉ mục bởi trình thu thập tìm kiếm đó có nghĩa là các trình thu thập web sẽ không chỉ mục của chúng tôi liên kết trang nhãn vì mã dưới đây.
Disallow: / tìm kiếm
Điều đó có nghĩa là các liên kết có từ khóa tìm kiếm chỉ sau tên miền sẽ bị bỏ qua. Xem dưới đây ví dụ đó là một liên kết của trang nhãn có tên là SEO.
https://www.bloggertipstricks.com/ tìm kiếm / nhãn / SEO
Và nếu chúng ta bỏ Disallow: / tìm kiếm từ các mã trên sau đó trình thu thập sẽ truy cập vào toàn bộ blog của chúng tôi để chỉ mục và thu thập tất cả các nội dung và các trang web của mình.
Dưới đây Allow: / đề cập đến trang chủ có nghĩa là thu thập web có thể bò và trang chủ index blog của chúng tôi.
Không cho phép đặc biệt bài viết
Bây giờ giả sử nếu chúng ta muốn loại trừ một bài cụ thể từ các chỉ mục sau đó chúng ta có thể thêm vào dưới đây dòng trong code.
Disallow: /yyyy/mm/post-url.html
Dưới đây yyyy và mm dùng để chỉ năm xuất bản và tháng của các bài tương ứng. Ví dụ, nếu chúng ta đã xuất bản một bài đăng trong năm 2013 trong tháng Ba thì chúng ta phải sử dụng dưới dạng.
Disallow: /2013/03/post-url.html
Để thực hiện nhiệm vụ này dễ dàng, bạn có thể chỉ cần sao chép URL bài và loại bỏ những tên blog từ đầu.
Không cho phép đặc biệt trang
Nếu chúng ta cần để không cho phép một trang cụ thể thì chúng ta có thể sử dụng phương pháp tương tự như trên. Đơn giản chỉ cần sao chép URL trang và loại bỏ địa chỉ blog của nó mà sẽ một cái gì đó giống như thế này:
Disallow: /p/page-url.html
Mã này đề cập đến các sitemap của blog của chúng tôi. Bằng cách thêm liên kết sitemap ở đây chúng tôi chỉ đơn giản là tối ưu hóa tốc độ thu thập trên blog của chúng tôi. Có nghĩa là bất cứ khi nào các trình thu thập web quét tập tin robots.txt của chúng tôi họ sẽ tìm thấy một con đường dẫn tới sitemap của chúng tôi, nơi tất cả các liên kết của bài viết được xuất bản của chúng tôi hiện nay. Web crawlers sẽ tìm thấy nó dễ dàng để thu thập tất cả các bài viết của chúng tôi. Do đó, có những cơ hội tốt hơn mà trình thu thập web thu thập tất cả các bài viết blog của chúng tôi mà không bỏ qua một duy nhất.
Lưu ý: sitemap này sẽ chỉ cho các trình thu thập web về 25 bài viết gần đây. Nếu bạn muốn tăng số lượng các liên kết trong sitemap của bạn sau đó thay thế sơ đồ trang web mặc định với dưới một. Nó sẽ làm việc cho 500 bài viết đầu tiên gần đây.
Sitemap: http://example.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500
Nếu bạn có nhiều hơn 500 bài viết được công bố trong blog của bạn sau đó bạn có thể sử dụng hai sơ đồ web như dưới đây:
Sitemap: http://example.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500
Sitemap: http://example.blogspot.com/atom.xml?redirect=false&start-index=500&max -results = 1000
Thêm robots.txt tùy chỉnh để Blogger
Bây giờ là phần chính của bài viết này là làm thế nào để thêm robots.txt tùy chỉnh trong blogger. Vì vậy, dưới đây là các bước để thêm nó.
- Tới blog blogger của bạn.
- Điều hướng đến Cài đặt >> Preferences Tìm >> Crawlers và lập chỉ mục >> Robots.txt tùy chỉnh >> Edit >> Có
- Bây giờ dán mã tập tin robots.txt của bạn trong hộp.
- Click vào nút Save Changes.
- Bạn đã làm xong!
Làm thế nào để Kiểm tra file Robots.txt của bạn?
Bạn có thể kiểm tra tập tin này vào blog của bạn bằng cách thêm /robots.txt cuối cùng để URL blog của bạn trong trình duyệt. Hãy xem ví dụ dưới đây cho bản demo.
https://www.bloggertipstricks.com/robots.txt
Khi bạn truy cập vào URL tập tin robots.txt bạn sẽ nhìn thấy toàn bộ mã mà bạn đang sử dụng trong file robots.txt tùy chỉnh của bạn. Xem hình ảnh dưới đây.
Thức từ!
Đây là của ngày hôm nay hướng dẫn đầy đủ về cách để thêm tập tin robots.txt tùy chỉnh trong blogger. Tôi thật sự cố gắng với trái tim của tôi để làm hướng dẫn này là đơn giản và thông tin càng tốt. Nhưng vẫn còn nếu bạn có và nghi ngờ hoặc truy vấn sau đó cảm thấy tự do để hỏi tôi. Đừng để bất kỳ mã trong các thiết lập robots.txt tùy chỉnh của bạn mà không biết về nó. Đơn giản chỉ cần yêu cầu tôi giải quyết các truy vấn của bạn. Tôi sẽ cho bạn biết tất cả mọi thứ một cách chi tiết. Cảm ơn chàng trai để đọc hướng dẫn này. Nếu bạn thích nó thì vui lòng hỗ trợ tôi để lây lan từ của tôi bằng cách chia sẻ bài này trên hồ sơ phương tiện truyền thông xã hội của bạn. Chúc mừng blog!
No comments:
Post a Comment