User-agent: * # Izinkan semua crawler mengakses seluruh website Allow: / # Blok folder yang tidak perlu diindeks (jika ada) Disallow: /cgi-bin/ Disallow: /tmp/ Disallow: /cache/ # Sitemap Sitemap: https://afdalsex.com/sitemap.xml # Host (berguna untuk beberapa crawler) Host: afdalsex.com