Rastreadores de IA / Rastreadores de IA

Google-CloudVertexBot: qué hace y qué cambia si lo bloqueas

Por la redacción de CitedBy · Revisado el 2026-10-24 · 3 fuentes · método (EN)

Qué es Google-CloudVertexBot

Google-CloudVertexBot es un rastreador de Google incluido entre sus rastreadores comunes. Google dice que hace los rastreos que piden los propietarios de sitios para crear Vertex AI Agents. Google lo muestra como una subcadena de agente de usuario, no como una cadena de agente de usuario completa.

Qué dice el proveedor

En palabras del proveedor (original en inglés): “Crawling preferences addressed to the Google-CloudVertexBot user agent affect crawls requested by the site owners' for building Vertex AI Agents”

Fuente: Google Search Central: Google's common crawlers, leído el 24 de octubre de 2026.

Qué pasa si bloqueas Google-CloudVertexBot

Google dice que las preferencias dirigidas al agente de usuario Google-CloudVertexBot afectan a los rastreos que piden los propietarios de sitios para crear Vertex AI Agents. Dice que esto no afecta a Google Search ni a otros productos.

Las líneas de robots.txt

Para permitir Google-CloudVertexBot:

User-agent: Google-CloudVertexBot
Allow: /

Para bloquear Google-CloudVertexBot:

User-agent: Google-CloudVertexBot
Disallow: /

Pega un bloque en el robots.txt de la raíz de tu host, por ejemplo https://example.com/robots.txt. Un grupo para un token no cubre los demás rastreadores del mismo operador.

La cadena user-agent que muestra el proveedor:

Google-CloudVertexBot

Cómo distinguir una petición real de una falsa

El archivo developers.google.com/static/crawling/ipranges/common-crawlers.json tenía 317 rangos el 24 de octubre de 2026, archivo del 2026-10-23.

Google dice que los rastreadores comunes por lo general rastrean desde los rangos de common-crawlers.json y que el nombre de DNS inverso coincide con crawl-*-*-*-*.googlebot.com o geo-crawl-*-*-*-*.geo.googlebot.com.

Compara con Googlebot

Googlebot: Googlebot rastrea para Google Search, mientras que Google-CloudVertexBot solo rastrea cuando un propietario de sitio ha pedido un rastreo para crear Vertex AI Agents.

Tu propio sitio

La comprobación gratuita del recuadro de arriba prueba ocho rastreadores (GPTBot, OAI-SearchBot, ChatGPT-User, PerplexityBot, ClaudeBot, Google-Extended, Bingbot y Googlebot). Google-CloudVertexBot no es uno de ellos: lee tu robots.txt buscando un grupo Google-CloudVertexBot y busca el user agent en el registro de tu servidor. La lista completa de rastreadores está en el directorio de rastreadores de IA.

Preguntas frecuentes

¿Google-CloudVertexBot respeta robots.txt?

Sí. Google dice que los rastreadores comunes siempre obedecen las reglas de robots.txt cuando rastrean de forma automática. Dale a Google-CloudVertexBot su propio grupo User-agent en robots.txt: los demás rastreadores del mismo operador tienen cada uno su ajuste.

¿Cómo sé que Google-CloudVertexBot está realmente bloqueado?

robots.txt es solo una capa: una regla de CDN o de cortafuegos también puede rechazar a un rastreador, y un rastreador puede ignorar el archivo. Busca el user agent en el registro de tu servidor y prueba la dirección desde fuera de tu red.

Fuentes

• Google Search Central: Google's common crawlers
• Google: common-crawlers.json (read 2026-10-24, creationTime 2026-10-23)
• Google Search Central: Overview of Google crawlers and fetchers