Google es increíblemente bueno para hacer muchas cosas que consideramos necesarias para el funcionamiento de nuestra vida diaria. Nos ayuda a encontrar información. Nos ayuda a encontrar la tienda más cercana con lo que queríamos. Nos ayuda a ir del punto A al punto B con el menor esfuerzo posible.
Entre todas las cosas que hace bien el motor de búsqueda de Google, destaca una: rastrear un sitio web. Los rastreadores de Google son tremendamente buenos en lo que hacen, indexando su sitio web para que pueda mostrarlo en los resultados de búsqueda.
Pero de vez en cuando, puede pedirle a Google que vuelva a rastrear su sitio web: revise una sola página o todo el sitio web una vez más. Si eso es lo que quieres hacer, te enseñaremos cómo hacerlo. En este artículo, aprenderá:
El rastreo web es el proceso por el cual una araña web, también llamada robot araña, descubre y revisa las páginas de su sitio web. El rastreo web es una parte importante del trabajo de un motor de búsqueda, ya que se realiza con otras actividades clave que hacen que su sitio web aparezca en los resultados de búsqueda.
Por lo general, un motor de búsqueda como Google empleará rastreadores para «leer» las páginas que podría indexar, recopilar y almacenar datos de ellas. Esto les permite mostrar esas páginas como resultados de búsqueda cuando alguien realiza una búsqueda en Google, y los algoritmos del motor creen que su sitio web podría tener una respuesta válida a su consulta.
En la práctica, vemos que esto sucede todos los días cuando vas a Google y escribes lo que te interesa en ese momento en particular. Las páginas de resultados se llenan de posibles respuestas, basadas en cómo el algoritmo de Google las calificó, pero impulsadas por la capacidad del motor de búsqueda para rastrear e indexar la información en su sitio web.
El proceso de rastreo comienza cuando Google obtiene la dirección de su página. Esto puede suceder de varias formas: Google puede, por ejemplo, encontrar un enlace en otro sitio web. Su proveedor de servicios de alojamiento administrado también puede enviar una señal a Google, y usted puede hacerlo usted mismo, proporcionando un mapa del sitio, al que volveremos más adelante.
El motor de búsqueda envía sus rastreadores que encuentran y analizan el contenido y el código de la página. A continuación, indexará la página a menos que haya algo que le impida hacerlo, y la mostrará cuando alguien la busque en línea. Es casi tan simple como eso.
El rastreo, al igual que la indexación, es un proceso con algunos matices. Por ejemplo, puede optar por no participar en el proceso y decirle a Google que no debe rastrear su sitio web. También puede señalar determinadas páginas que no desea que Google rastree. Incluso puede evitar que Google rastree recursos como imágenes o archivos multimedia. Todo esto se gestiona creando un archivo robots.txt y colocándolo en la raíz de su sitio.
Sin embargo, decirle a Google que no rastree una página no evitará que aparezca en los resultados de búsqueda. Si la araña de Google encuentra su página a través de un enlace en un sitio web de terceros, aún podría indexarla y hacer que aparezca una versión en los resultados de búsqueda. Si desea que ciertas páginas no estén disponibles en los resultados de búsqueda de Google, por ejemplo, páginas de inicio de sesión de administrador. o páginas de agradecimiento: debe usar la metaetiqueta noindex en ellas.
La razón principal por la que las personas le piden a Google que vuelva a rastrear su sitio web es que han realizado algunos cambios en las páginas y quieren que Google los refleje lo antes posible. Solicitar un nuevo rastreo en todo el sitio web es común después de una auditoría de contenido significativa. También puede solicitarlo después de un cambio de marca, o incluso si cambió de, por ejemplo, un tema de WordPress de blog a un tema de WordPress de revista.
En cuanto a las solicitudes de una sola página, es posible que desee utilizarlos al publicar contenido urgente y desea ser el primero en incluirlo en los resultados de búsqueda. También es común solicitar un nuevo rastreo de una sola página después de un cambio significativo o extenso en el contenido de una página.
Lo primero es lo primero. Asegúrese de no bloquear ninguna página que desee rastrear con un archivo robots.txt. Los motores de búsqueda tienen herramientas de prueba de robots.txt que pueden ayudarlo a determinar si una página está protegida contra el rastreo o no. Puede encontrar estas herramientas en Search Console para Google. Si no hay obstáculos allí, puede pasar al siguiente paso.
Hay dos métodos que puede pedirle a Google que vuelva a rastrear su sitio web. Sin embargo, tenga en cuenta que, en cualquier caso, puede terminar esperando un tiempo antes de que el rastreador haga su trabajo y sus páginas estén indexadas y listas para aparecer en los resultados de búsqueda. Enviar múltiples solicitudes no ayudará con eso.
Para que Google vuelva a rastrear su sitio web, o en general, si desea que vuelva a rastrear muchas URL al mismo tiempo, debe enviar un mapa del sitio a Google. Sin embargo, primero debe crear un mapa del sitio, que es donde tiene un complemento como SEO de Yoast Viene muy bien. Navegar a SEO> Generaly luego busque la opción XML Sitemaps.
Asegúrese de que esté configurado en «activado», haga clic en el signo de interrogación junto a él, presione el texto con hipervínculo «ver el mapa del sitio» y tendrá acceso al mapa del sitio de su sitio web. Una vez que lo tenga, puede dirigirse a Google Search Console y agregar el sitio web si aún no lo ha hecho.
La pestaña Mapas del sitio es donde desea ir; le permitirá ingresar la URL de su mapa del sitio. Si lo ha hecho con éxito, verá que el mapa del sitio aparece en la lista a continuación. Una vez hecho esto, Google no debería tener problemas para rastrear su sitio web.
Alternativamente, puede ir a robots.txt y especificar la ruta a su mapa del sitio. Debería verse algo como esto:
Mapa del sitio: http://example.com/my_sitemap.xml
Para acceder al archivo robots.txt en su sitio web, puede usar un cliente FTP o puede confiar en Yoast SEO nuevamente. Navegar a SEO> Herramientas desde el backend de su sitio web y, a continuación, utilice el editor de archivos para acceder a él.
En algunos casos, querrá que Google preste especial atención a solo un par de enlaces. La forma correcta de manejar esto sería utilizar una herramienta de inspección de URL en las URL que desea inspeccionar. La herramienta le permitirá solicitar un nuevo rastreo, pero recuerde: si tiene más de un par de URL que necesitan volver a rastrear, debe enviar un mapa del sitio.
Solicitar un nuevo rastreo de una URL individual es tan simple como inspeccionarla con la herramienta de inspección de URL en Google Search Console y seleccionar la opción Solicitar indexación. En caso de que la página no tenga problemas obvios que impidan que se indexe, algo que sabrá de inmediato, la página se agregará a la cola de indexación.
¡Vamos a envolverlo!
La visibilidad de su sitio web en los motores de búsqueda depende de que los rastreadores del motor hagan un inventario del contenido de su sitio web. En caso de que haya agregado nuevas partes del sitio web, haya cambiado algunas antiguas o esté buscando salir de la oscuridad y permitir que las personas encuentren su sitio web mediante motores de búsqueda, tiene dos opciones.
Enviar un mapa del sitio es una forma segura de indexar todo su sitio web, y debe usarlo si tiene más de un par de URL que deben indexarse. De lo contrario, debe usar la herramienta de inspección de URL para identificar las URL que necesitan volver a indexarse y dejar que Google sepa que debe hacerlo.
Apoya nuestro trabajo ❤️
Si te ha gustado este artículo, considera dejar una propina para ayudarnos a seguir publicando contenido de calidad.
