############################################
# Magento 2 Production Robots.txt
############################################

User-agent: *
Disallow: /app/
Disallow: /bin/
Disallow: /dev/
Disallow: /lib/
Disallow: /pub/
Disallow: /var/
Disallow: /vendor/

Disallow: /checkout/
Disallow: /customer/
Disallow: /catalogsearch/
Disallow: /review/
Disallow: /sendfriend/
Disallow: /wishlist/
Disallow: /admin/
Disallow: /index.php/

Allow: /

############################################
# Google specific
############################################

User-agent: Googlebot
Crawl-delay: 5
Allow: /

############################################
# Block Meta crawler completely
############################################

User-agent: MetaExternalAgent
Disallow: /

############################################
# Sitemap
############################################

Sitemap: https://swisstimebuyers.com/sitemap.xml