Đối với một web bán hàng hya một website bất kỳ muốn đẩy mạnh website Seo thì bắt buộc phải có tệp Robots.txt (Nó rất quan trọng) nó được đặt trong thư mục gốc của website.
Tầm quan trọng của Content marketing trong seo
Tầm quan trọng của Content marketing trong seo
Tệp "robots.txt" là tệp tin thông báo cho các công cụ tìm kiếm biết liệu chúng có được truy cập, thu thập dữ liệu ở phần nào trong trang web. Tệp này sẽ được cho vào thư mục gốc trang web của bạn.
Trong bất kỳ một website nào cũng có 1 vài thư mục bạn không muốn cho google thu thập dữ liệu và robots.txt là giải pháp để bạn cấm nó truy cập vào đó bằng cách sử dụng lệnh disallow.
Các nguyên tắc hữu ích cho robots.txt
Bạn sẽ không cảm thấy yên tâm khi sử dụng robots.txt để chặn tài liệu nhạy cảm, bí mật. Lý do là do các công cụ tìm kiếm vẫn có thể tham chiều các URL bạn chặn ( chỉ hiện thị URL không phải tiêu đề hay đoạn trích ) nếu ngẫu nhiên có được các liên kết đến URL đó trên internet ( như các bản tham chiếu bản ghi ). Người dùng có thể tò mò, kiểm tra các thư mục hoặc thu mục con trong tệp robots.txt và chẩn đoán ra URL của nội dung mà bạn không muốn cho xem. Việc mã hóa nội dung hoặc bảo vệ với .htaccess là lựa chọn an toàn.
Những điều nên tránh
Cho phép các trang giống kết quả tìm kiềm được thu thập dữ liệu ( người dùng không thích rời trang kết quả tìm kiếm khác không thêm giá trị quan trọng nào cho họ ).
Cho phép số lượng lớn các trang tự tạo với cùng nội dung hoặc nội dung chỉ hơi khác nhau được thu thập dữ liệu 100.000 trang gần như trùng lặp này có thật sự nên nằm trong chỉ mục của công cụ tìm kiếm.
Cho phép các URL được tạo ra bởi các dịch vụ ủy quyền được thu thập dữ liệu
Tạo file robots.txt không mất quá nhiều thời gian nhưng nó là công việc vô cùng quan trọng trong 1 quy trình seo hoàn chỉnh. Hãy dành ra một chút thời gian để có thể tạo ra file robots.txt hiệu quả nhất cho website của bạn.
Xem thêm: khoa hoc seo inet
Không có nhận xét nào:
Đăng nhận xét