Una sola línea de robots.txt puede borrarte de las respuestas de IA.
Robots.txt es el primer archivo que lee cada rastreador, y los rastreadores de IA que se comportan bien (GPTBot, ClaudeBot, PerplexityBot) lo respetan de forma estricta. Una sola línea disallow, a menudo copiada de una plantilla o heredada de una configuración de pruebas, elimina en silencio todo tu sitio de las respuestas de ChatGPT, Claude y Perplexity. No aparece ningún error; simplemente dejas de ser citado.
