Agregar o actualizar un archivo robots.txt
En este artículo se describe cómo crear, editar, cargar y validar el archivo robots.txt para cada dominio alojado en Microsoft Dynamics 365 Commerce.
El rastreo inesperado o no dirigido de su sitio por parte de los motores de búsqueda puede provocar un gran volumen de errores del tipo "404 Página no encontrada". Estos errores pueden afectar el rendimiento ya que el sitio responde a todas las solicitudes de páginas que no existen. Para ayudar a solucionar este problema, debe asegurarse de que su dominio siempre tenga un archivo robots.txt actualizado y válido para indicar a los rastreadores web que busquen solo páginas relevantes en su sitio.
Se aplica a
Este artículo se aplica a las siguientes configuraciones:
- Version: Commerce 10.0.16 o posteriores
- Componente: Empresa a consumidor (B2C) o empresa a empresa (B2B)
- Área de características: Rendimiento del sitio web de Commerce
Requisitos previos
Es administrador del sistema en su instancia de Commerce.
Creo un archivo robots.txt en su equipo o descargó una copia, dependiendo de su situación:
- Si no ha subido previamente un archivo robots.txt para su dominio, cree un nuevo archivo en su equipo siguiendo el estándar de exclusión de robots. Utilice el archivo robots.txt de muestra más adelante en este artículo como punto de partida.
- Si anteriormente subió un archivo robots.txt para su dominio, descargue el archivo existente.
Pasos a seguir
Para editar y cargar un archivo robots.txt, siga estos pasos.
- Abra su copia local del archivo robots.txt.
- Edite el archivo para que incluya todas las entradas No permitir en el archivo robots.txt de muestra que sigue.
- Confirme que el archivo esté formateado correctamente según el estándar de exclusión de robots.
- Cargue el archivo a su sitio siguiendo las instrucciones de Cargar un archivo robots.txt.
Contenido del archivo robots.txt de muestra
User-agent: *
Disallow: /signin
Disallow: /cart
Disallow: /*refiners=
Disallow: /*sorting=
Disallow: /*search?
Disallow: /*search=
Disallow: /*.woff
Disallow: /*.woff2
Disallow: /*skip=
Validar
Utilice el siguiente método para validar que el archivo se haya agregado:
- Descripción o finalidad: valide que su archivo robots.txt esté disponible para su dominio.
- Pasos a ejecutar: en un navegador web, abra la página en <su dominio>/robots.txt.
- Resultado de aprobación: puede ver correctamente su archivo robots.txt.