El archivo robots.txt es un archivo de texto plano que está dentro de nuestra tienda en Shopify. Este archivo es el que le va a dar información a los motores de búsqueda sobre cada página que tenemos.
👀 Por medio de este archivo le decimos al navegador, lo que queremos que se rastree en nuestra web y lo que no queremos que rastree.
Es importante poder manejar este archivo porque de esta forma solo mantenemos trapeadas nuestras páginas con información relevante y con las que no tienen esto las “escondemos” para evitar que nos baje el PageRank de nuestro posicionamiento orgánico.
✅ Las tiendas de Shopify cuentan con funciones integradas de SEO que ayudan a optimizar tu contenido.
Los rastreadores o arañas (también llamadas crawlers) suelen pasar bastante tiempo buscando nueva información para usar como fuente de datos en las búsquedas.
Este archivo se encuentra en el directorio raíz de nuestra web, para encontrarlo tipeamos nuestra url con el agregado de una barra (/) y robots.txt
tutiendashopify.com/robots.txt
¿Qué información tiene y ofrece?
Apenas abrimos este archivo nos encontramos con la siguiente línea:
User-agent:
El User-agent son los motores de búsqueda, como Google, Bing, Yahoo, etc, cuando se le agrega un asterisco significa que va a aplicar para todos los motores de búsqueda.
Disallow: /admin
Disallow: /cart
Disallow: /orders
Disallow: /checkout
Luego veremos un listado de “Disallow”, el disallow es lo que informa que esas páginas no sean indexadas. Por defecto todo lo que no esté listado como disallow se toma como archivo indexable, es decir, se muestra.
En este listado se agregan las páginas de carrito, checkout, políticas de privacidad, etc, Este tipo de páginas que no es necesario que aparezcan en buscadores.
💡 Los robots.txt son una parte importante del SEO, ya que son los encargados de abrir o cerrar las puertas a los robots de los diferentes motores de búsqueda.
Desde 2021 Shopify habilitó la edición de robots.txt 🎉
Ahora desde nuestro panel de Shopify podemos editar el archivo robots.txt.
ALERT 🚦
Para trabajar este archivo es recomendable trabajar con un experto o tener experiencia en edición de código SEO.
Si necesitas más información, aquí encuentras la documentación oficial de Shopify:
https://help.shopify.com/es/manual/promoting-marketing/seo/editing-robots-txt
Y ya sabes, si tenés dudas o necesitas ayuda, desde Simplify estamos preparados para resolverlas 😉