# Khai báo sitemap và host để Googlebot ưu tiên crawl
Sitemap: https://www.tikareview.com/sitemap_index.xml
Host: www.tikareview.com

User-agent: *
# Chặn khu vực quản trị
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

# Chặn URL tìm kiếm (tránh duplicate content)
Disallow: /?s=
Disallow: /search/
Disallow: /page/*/?s=

# Chặn REST API không cần index
Disallow: /wp-json/
Disallow: /?rest_route=

# (Tùy chọn) Nếu bạn không muốn index trang tag archive:
# Disallow: /tag/

# (Tùy chọn) Nếu bạn không muốn index trang author archive:
# Disallow: /author/

# Giới hạn tốc độ crawl để tránh server quá tải (Google không đọc nhưng bot khác tuân thủ)
Crawl-delay: 5

# Chặn một số bot xấu thường gây nặng server
User-agent: AhrefsBot
Disallow: /

User-agent: MJ12bot
Disallow: /

User-agent: SemrushBot
Disallow: /

User-agent: DotBot
Disallow: /