# robots.txt para convertirarchivosonline.com # Permitir a todos los bots User-agent: * Allow: / Disallow: /api/ Disallow: /admin/ # Sitemap Sitemap: https://www.convertirarchivosonline.com/sitemap.xml # Crawl-delay para evitar saturación Crawl-delay: 1 # Google Bot (sin crawl-delay para indexación más rápida) User-agent: Googlebot Allow: / Disallow: /api/ Disallow: /admin/ # Bing Bot User-agent: Bingbot Allow: / Disallow: /api/ Disallow: /admin/ Crawl-delay: 1 # Yandex Bot User-agent: Yandex Allow: / Crawl-delay: 2 # Baidu Bot User-agent: Baiduspider Allow: / Crawl-delay: 2