# Revisamos el Coche — https://revisamoselcoche.com # # Esto controla el RASTREO, no el indice. Una pagina prohibida aqui puede salir # igualmente en Google, sin descripcion, si alguien la enlaza: Google respeta el # "no entres", pero no por eso olvida que existe. Lo que saca una pagina del # indice es la etiqueta `noindex` en la propia pagina, y para leerla Google tiene # que poder entrar. # # Por eso /login y /register ya NO estan prohibidas: se dejan rastrear # precisamente para que se lea su `noindex`. Lo mismo el resto del area de # cuenta, que ademas pide identificarse. User-agent: * # El area privada: no hay nada publico que rastrear y gasta presupuesto. Disallow: /user Disallow: /account Disallow: /dashboard Disallow: /trastienda-rebi # Direcciones con parametros que fabrican copias de lo mismo. Disallow: /inspection/request? Disallow: /search? Disallow: /? Sitemap: https://revisamoselcoche.com/sitemap.xml # El sitio explicado en dos pantallas, para quien no quiera rastrear 1 MB de # HTML por pagina: https://revisamoselcoche.com/llms.txt User-agent: AdsBot-Google Allow: / # ------------------------------------------------------------------ # Rastreadores de IA # ------------------------------------------------------------------ # # Se les deja pasar, y se dice en voz alta en vez de dejarlo al azar de lo que # haga la regla general. # # El motivo es de negocio: queremos salir citados cuando alguien le pregunta a # un asistente "como se si un coche de segunda mano esta bien". Si no nos # rastrean, no salimos. El blog existe para que lo lean y lleguen; cerrarlo a # quien hoy manda lectores seria cerrar la puerta. # # Es una decision, no una configuracion tecnica: esta escrita en la spec 028 # para que se pueda discutir. Cambiarla es cambiar `Allow` por `Disallow` aqui # abajo, sin desplegar codigo. # Los que buscan y citan la fuente. User-agent: OAI-SearchBot Allow: / User-agent: PerplexityBot Allow: / User-agent: ClaudeBot Allow: / User-agent: Claude-SearchBot Allow: / User-agent: Google-Extended Allow: / User-agent: Applebot-Extended Allow: / # Los que recolectan para entrenar. Hoy tambien pasan, porque es la via por la # que se entra en lo que esos asistentes saben. Si algun dia se decide que el # contenido no alimente modelos, estas son las dos lineas que cambian. User-agent: GPTBot Allow: / User-agent: CCBot Allow: /