⚙️ Cấu hình Robots.txt
| User-agent | Loại | Đường dẫn |
|---|
📄 Kết quả
💡 Hướng dẫn: Sau khi tạo xong, hãy upload file
robots.txt vào thư mục gốc (root) của
website. File này giúp các công cụ tìm kiếm hiểu được những trang nào nên và không nên thu thập dữ liệu.