Tạo robots.txt

Tạo robots.txt

Chọn mẫu sẵn (Cho phép tất cả, Chặn tất cả, Next.js, WordPress) hoặc tự nhập User-agent, Allow/Disallow và Sitemap; kết quả cập nhật ngay để copy/tải.

Lưu ý

• Đặt file tại thư mục gốc: https://tenmien/robots.txt.
• Disallow chỉ là gợi ý cho bot; không phải cơ chế bảo mật.
• Khai báo Sitemap giúp công cụ tìm kiếm phát hiện URL nhanh hơn.