3. ¿Pueden leerle los motores de respuesta?
Qué es esto
Los rastreadores que todo el mundo bloquea son los que entrenan modelos. No son los que deciden si un asistente puede citarle. Esos son distintos, se llaman distinto en cada proveedor, y bloquearlos sin querer es fácil — Apple, por ejemplo, sigue su regla para Googlebot cuando usted no ha nombrado a Apple.
Qué encontramos en quepasahub.com
Todos los rastreadores que deciden si una IA puede citarle ya pueden acceder a este sitio. Aquí no hay nada que corregir.
Los 6 rastreadores que respondieron pueden acceder a quepasahub.com. Tu archivo robots respondió HTTP 200.
| Crawler | De quién | Puede acceder a quepasahub.com |
|---|---|---|
| OAI-SearchBot | OpenAI | sí |
| Claude-SearchBot | Anthropic | sí |
| Claude-User | Anthropic | sí |
| Googlebot | sí | |
| PerplexityBot | Perplexity | sí |
| Applebot | Apple | sí |
No comprobado, y lo decimos en vez de suponer: Google-Extended, meta-externalagent, Bingbot, CCBot, Amazonbot, Bytespider.
Medido el https://quepasahub.com.
El archivo en packs/03-ai-crawlers/robots-block.txt dice lo mismo para quepasahub.com, así que puedes comprobarlo tú mismo en lugar de fiarte de nuestra palabra.
Aquí todavía no hay nada que hacer
Este capítulo no tiene ningún paso para quepasahub.com hoy. No inventamos nada para darte algo que hacer.
Cuándo empieza a importar
Todos los rastreadores que deciden si un asistente puede citarle ya pueden llegar a este sitio.