Una etiqueta Meta Robots es un fragmento de código HTML que proporciona instrucciones a los motores de búsqueda sobre cómo rastrear o indexar las páginas de un sitio web. Esto le da un mayor nivel de control sobre cómo se indexan y se muestran las páginas específicas en las SERP.
El sEO es el arte de controlar la forma en que su sitio se vincula con los motores de búsqueda
Por lo general, esto significa conseguir la mayor visibilidad posible, pero puede haber ocasiones en las que quiera excluir una página de las SERP o restringir la forma en que los motores de búsqueda la utilizan.
Para ello, tiene que dar instrucciones a los motores de búsqueda sobre cómo quiere que se trate una página concreta. Una etiqueta llamada Meta Robots es la forma perfecta de hacerlo.
Así que :
- ¿Qué es la etiqueta meta robots y por qué es importante?
- ¿Cuáles son los diferentes tipos de directivas de los robots?
- ¿Cómo implementar este atributo en un sitio web?
Todas estas son preguntas a las que doy soluciones claras y precisas en esta miniguía.
¡Vamos!
Capítulo 1: ¿Cuáles son los fundamentos de la etiqueta meta robots?
En este capítulo, me limitaré a exponer las nociones básicas de la etiqueta meta robots y las principales razones por las que es importante.
1.1 ¿Qué es una etiqueta meta robots?
Para ponerlo en términos simples, esto etiqueta meta indica a los motores de búsqueda qué acciones pueden (o no) realizar en una determinada página
Los principales motores de búsqueda respetarán los comandos incluidos en esta etiqueta.
IMPORTANTE : Esta etiqueta no tiene efecto en todo el sitio. Puede contener valores diferentes en distintas páginas del mismo sitio web.
1.2 Sintaxis básica
La sintaxis básica de la etiqueta meta robots es bastante sencilla:
<meta nombre=»robots«content=»directivas«>
Ejemplo:
Para utilizarlo, añada el atributo a la sección <cabeza> sección de cada página web para proporcionar instrucciones a orugas
<título> … </título>
A diferencia del archivo robots.txt que proporciona instrucciones para todo el sitio, el meta atributo robots se aplica sólo a la página en la que aparece.
IMPORTANTE: ELuso correcto de la sintaxis a la hora de construir la etiqueta es extremadamente importante, ya que el uso de una sintaxis incorrecta puede repercutir negativamente en la presencia y la clasificación de su sitio en las SERP.
1.3. ¿Por qué es importante el uso de la etiqueta Meta Robots?
Este atributo se utiliza para controlar el acceso de los rastreadores a una página y para evitar que los motores de búsqueda indexen las páginas que usted no desea que sean indexadas.
Esto evita perder tiempo en arrastrándose páginas de su sitio y, por tanto, aumenta la eficacia del rastreo. También permite evitar que las páginas aparezcan en las SERPS y puede ayudar a limitar los problemas con contenido duplicado.
En general, no necesitará utilizar la metaetiqueta robots. Si quiere maximizar su tráfico web y su pagerank, generalmente dejará que los motores de búsqueda hagan su trabajo sin obstáculos
Pero puede haber casos específicos en los que tenga sentido restringir lo que deben hacer.
Por ejemplo:
- Privacidad limitada
Si una página no está realmente destinada al público en general, la etiqueta meta robots reducirá las posibilidades de que la gente la encuentre. No será invisible y cualquiera que tenga el enlace podrá seguir viéndolo, pero no aparecerá en las SERPS.
- Una página no está lista para el público
Supongamos que una nueva función del sitio está en fase beta y usted quiere que sólo la vean sus empleados o ciertos clientes
Puede lanzar la página y utilizar un atributo meta robots para mantener alejado el tráfico de búsqueda hasta que esté listo. Sin embargo, ¡asegúrese de revisar la etiqueta cuando quiera salir a la luz!
- Enlaces spam
No hay forma más fácil de dañar el ranking de su sitio que enlazar con sitios web que contienen spam. Pero, ¿qué ocurre si dicho sitio contiene realmente un gran recurso que usted quiere compartir con sus visitantes?
Utilizando un etiqueta meta robots puede indicar a los motores de búsqueda que no seguir el enlaceenlace, protegiendo así el ranking de su página.
- Protección de la imagen
Para la mayoría de las empresas, es mejor dejar que sus imágenes (con marca de agua, atribuidas) se difundan por toda la red. Pero si quiere presentar una imagen sin que se utilice en otro lugar, el atributo robots puede decirle a Google que no lo hagaíndice.
Ahora que ya conoce los aspectos básicos de esta etiqueta, veamos las diferentes directivas y consejos para configurarla en un sitio web.
Capítulo 2: ¿Cuáles son las principales directivas Robots y cómo implementarlas en un sitio web?
En esta sección, veremos diferentes formas de implementar directivas de robot a nivel de página para indicar a las arañas de los motores de búsqueda las reglas sobre cómo deben tratar las páginas de su sitio.
A continuación, le daré algunos consejos para utilizar esta etiqueta y técnicas para implementarla en su sitio
2.1. ¿Cuáles son los diferentes tipos de directivas para robots?
Directivas de los robots las directivas son secciones de código que dan instrucciones a los rastreadores web sobre cómo debe analizarse o indexarse el contenido de una página
Hay una serie de directivas que puede utilizar para comunicarse con los motores de búsqueda sobre cómo manejar las páginas de su sitio
He aquí algunos ejemplos y cómo funciona cada uno de ellos.
2.1.1. Todo
Esta directiva indica a los rastreadores que no hay limitaciones para el rastreo y la indexación. Funciona de forma similar al Índice y directivas Siga.
2.1.2 Índice
La directiva index indica que los rastreadores pueden indexar la página. Esto se tiene en cuenta por defecto. No es necesario añadirlo a una página para que se indexe.
2.1.3. Noindex
Si utiliza el código anterior en la sección de la cabecera de una página web, está diciendo efectivamente a los motores de búsqueda que no indexen el contenido de la página y que no lo muestren en los resultados de búsqueda de Google.
Si la página ya estaba indexada, esta directiva indicará al rastreador que elimine la página del índice.
2.1.4. Siga
Cuando se utiliza esta directiva en una página, se está indicando a los motores de búsqueda que sigan todos los enlaces de la página y que también transmitan la autoridad de los enlaces.
2.1.5. Nofollow
Si utiliza el código que se indica a continuación en la sección del encabezamiento de una página web, estará diciendo efectivamente a los motores de búsqueda que no sigan ningún enlace (tanto interno como externo) en esa página y que no transmitan el pagerank de Google a través de esos enlaces.
En pocas palabras, impide que los motores de búsqueda sigan los enlaces de una página y transmitan cualquier valor.
2.1.6. Noindex, Nofollow
Tenga en cuenta que puede combinar varias directivas en un solo código y decir varias cosas a la vez. Por ejemplo, el siguiente código indica a los motores de búsqueda que no indexen el contenido de la página y que, al mismo tiempo, no sigan ningún enlace de la misma.
2.1,7 Noindex, Follow
Del mismo modo, el código siguiente prohíbe a los motores de búsqueda indexar el contenido de la página, pero exige el seguimiento de todos los enlaces de esa página.
2.1.8. Ninguno
Esta directiva equivale a »noindex, nofollow». Esencialmente indica a los motores de búsqueda que la página debe ser ignorada.
2.1.9. Noarchive
Esta directiva evita que los motores de búsqueda muestren el enlace en caché en los resultados de la búsqueda
También se puede utilizar para evitar que los competidores raspen su contenido, lo que resulta especialmente útil en los sitios de comercio electrónico en los que los precios se actualizan con frecuencia.
2.1.10. Nocache
Esta directiva es la misma que la Noarchive pero utilizado por Internet Explorer y Firefox sólo.
2.1.11. Nosnippet
Esta directiva indica a los motores de búsqueda que no muestren la descripción ampliada (es decir, la meta-descripción) de la página en los resultados de búsqueda.
El nosnippet es útil si quiere tener más control sobre lo que los usuarios deben ver en el contenido del sitio, lo que podría conducir a un aumento del CTR en función de la consulta de búsqueda.
2.1.12. Notranslate
Esta directiva prohíbe a los motores de búsqueda sugerir una traducción de la página en las SERP. Esto puede ser útil cuando no quiera que se traduzca el contenido de su página, ya que a veces la traducción automática no es precisa.
También puede especificar las secciones de su página que no deben traducirse mediante una clase:
<…>
2.1.13. Noimageindex
Esta directiva indica a los motores de búsqueda que no indexen las imágenes de la página. Esto es útil si no quiere que otras personas vuelvan a publicar sus imágenes como si fueran los propietarios, especialmente si esas imágenes tienen derechos de autor
2.1.14. No disponible_después
Esta directiva indica a los motores de búsqueda que no muestren la página en las SERP después de una fecha u hora determinada
Esto es útil para las páginas que son relevantes para un periodo de tiempo concreto, como las páginas de registro de eventos o las páginas de aterrizaje promocionales (por ejemplo, el Black Friday)
El contenido se desindexará una vez finalizado el evento y ya no verá aparecer la página.
Para las páginas con una ventana limitada de tiempo útil, es más práctico utilizar no disponible_después«es más práctico que colocar un noindex en la página en una fecha posterior.
En resumen, piense en ello como una etiqueta noindex con un temporizador.
2.1.15. Noodp
Esta directiva indica a los motores de búsqueda que no utilicen los metadatos del Open Directory Project para los títulos o fragmentos mostrados para esta página. Sin embargo, esto ha sido recientemente obviado.
2.1.16. Max-snippet
Esta directiva le ayuda a establecer el número máximo de caracteres que Google debe mostrar en las SERPs para una página. En el ejemplo siguiente, el número de caracteres se limitará a 150.
2.1.17. Max-video-preview
Esto configurará un número máximo de segundos para la vista previa de un fragmento de vídeo. En el ejemplo siguiente, Google mostrará una vista previa de 10 segundos
2.1.18. Max-image-preview
Esto indica a Google el tamaño de la imagen que mostrará para una página en la SERP. Hay tres valores posibles:
- Ninguno – No se mostrará ningún fragmento de imagen;
- Estándar – Se utilizará la vista previa de la imagen por defecto;
- Grande – Se puede mostrar la mayor vista previa posible.
Ahora, en función de los requisitos, puede utilizar estas directrices en la metaetiqueta robots de su sitio web.
2.2 Consejos de uso
Muchos propietarios de sitios sin experiencia en diseño web pueden querer retocar las metaetiquetas con fines de SEO
No es necesario ser un gurú del html para editar su etiqueta meta robot, pero sí es necesario utilizar los valores correctamente.
Aquí hay tres cosas a tener en cuenta:
- Puede utilizar varios valores (directivas) puede utilizar varios valores (directivas): la combinación de los mismos le proporciona un control más matizado, y puede agruparlos todos en una sola etiqueta de robot. Sólo tiene que separar estos diferentes valores con comas
Ejemplo
- Las mayúsculas o minúsculas no importan:
Ejemplo es lo mismo que
- Los espacios no importan: Sólo comas son necesarios para separar varios valores. Los espacios facilitarán la lectura, pero también puede ignorarlos
Ejemplo
2.3. Valores de las etiquetas (directivas) en conflicto
Es posible que su etiqueta contenga valores conflictivos
Por ejemplo:
{tipo de código = HTML} {/ código}
La etiqueta » Ninguno » le dice a los motores de búsqueda que no seguir sus enlacespero la etiqueta » Siga «La etiqueta les dice que deben siga esos enlaces. Esta etiqueta dice una cosa y su contraria al mismo tiempo.
Para evitar este tipo de situaciones, debe comprobar siempre sus metaetiquetas cuando las introduzca. Sin embargo, si se produce, no es desastroso, sólo que produce resultados imprevisibles.
La mayoría de los motores de búsqueda nunca han dado una respuesta pública sobre cómo manejan un conflicto como éste
No obstante, Google lo ha hecho, y sigue confiando en el el más restrictivo en el ejemplo anterior, Google ignorará «Siga»
He aquí otro ejemplo:
La mayoría de los motores de búsqueda elegirá el « nosnippet «porque es la más restrictiva.
Yandex también explicó su política y va con el por configuración por defecto
Además, si su archivo robots.txt conflictos de archivos con su etiqueta meta robotsetiqueta, no hay una respuesta definitiva sobre cómo se resuelven los dos por la mayoría de los motores de búsqueda.
Ahora veamos las técnicas para implementar la etiqueta meta robots en su sitio web.
2.4. ¿Cómo implementar una etiqueta meta robots en un sitio web?
Hay dos formas de implementar una etiqueta meta robots, y ambas tienen el mismo efecto sobre los rastreadores
2.4.1. Etiquetacolocada en la sección
Una de las formas más comunes de utilizar la metaetiqueta robots es colocarla como una metaetiqueta en la sección del encabezado de su página de la siguiente manera:
{tipo de código = HTML}
..
…{código}
Se trata siempre de una sola línea de código, y debe insertarse en la sección de la cabecera html de la página
Si utiliza WordPress.org, existen plugins que le permiten manipular sus metaetiquetas etiquetas solo o como parte de su como parte de su estrategia de SEO sin modificar directamente el código
Las etiquetas meta robots no afectan a la apariencia de su sitio web para sus visitantes; lo que hacen depende de los valores que usted ponga en ellas.
Además, al colocar el valor » robots » en el » Nombre «, se especifica que todos los rastreadores deben seguir el valor « noindex «en el atributo » Contenido »
En muchos casos, puede querer referirse a rastreadores específicos utilizando su nombre de agente de usuario (usuario-agente) en el atributo «Contenido» Nombre »
En este caso, tendrá que sustituir el valor « robots «con lausuario-agente cuando quiera seguir una directiva específica
Por ejemplo
Como se ha mencionado anteriormente, una metaetiqueta puede contener varias directivas en una etiqueta meta de robots
Del mismo modo, una página puede contener varias etiquetas Meta Robot si quiere dirigirse a diferentes agentes de usuario
2.4.2. X-Robots-Tag en la cabecera HTTP
Al igual que el uso de la meta tag robotsetiqueta, el directivas de los robots pueden aplicarse como las directivas etiqueta X-Robots en la cabecera HTTP de cualquier URL
Es decir, cualquier directiva utilizado en la etiqueta meta también puede aplicarse a la etiqueta de cabecera HTTP
Por ejemplo :
O si quiere hacer referencia a un agente de usuario específico en la etiqueta X-Robots, aquí tiene un ejemplo:
2.5. Herramientas para añadir etiquetas Meta Robots a un sitio web
Si desea añadir este atributo a su sitio, puede copiar las etiquetas presentadas en este artículo y pegarlas en el código HTML de su sitio
Además, hay herramientas que puede utilizar para generar instrucciones personalizadas y para añadir automáticamente etiquetas a las páginas web generadas por los sistemas de gestión de contenidos.
Capítulo 3: ¿Cuáles son las mejores prácticas SEO para las etiquetas robots?
A archivo robots.txt sólo le dirá al rastreador qué áreas del sitio web puede rastrear. Sin embargo, no le dirá al rastreador si debe indexar o no.
Para ayudarle, puede utilizar etiquetas de robot para guiar a los rastreadores en la indexación y muchas otras funciones
Hay dos tipos de etiquetas para robots: El etiqueta Meta Robots y la etiqueta etiqueta X-robots.
3.1. Faro de Meta Robots
Ya he hablado de esta etiqueta más arriba. Pasemos a la etiqueta X-robots.
3.2. Etiqueta X-Robots
El etiqueta Meta Robots es similar a la etiqueta X-robots, ya que permite controlar el rastreo y la indexación sólo a nivel de página
La única diferencia es que el etiqueta X-robots se define en la etiquetacabecera HTTP de una página para controlar el rastreo y la indexación de toda una página o de elementos específicos de la misma
Esta etiqueta X-Robots se utiliza principalmente para controlar, arrastrarse y índice páginas páginas no HTML
Ejemplo de etiqueta X-Robots :
x-robots-tag: noindex, nofollow, nosippet
Como se muestra en el ejemplo siguiente, el etiqueta X-robots utiliza el mismo conjunto de directivas que la etiqueta Meta Robots. Para ponerlo en práctica, necesita acceder al .htaccess, .php o el archivo del servidor para modificar las cabeceras.
3.3 Mejores prácticas de SEO para las etiquetas Robots
- No utilice la etiqueta Meta Robots y x-robots en la misma página, ya que una de ellas será redundante.
- Si no quiere que las páginas se indexen, pero quiere que la equidad de los enlaces se transmita a las páginas enlazadas, debe utilizar la etiqueta Meta Robots con directivas como noindex, follow. Esta es la mejor técnica para controlar la indexación en lugar de bloquear con el archivo robots.txt.
- No es necesario añadir índice o directivas seguir en cada página de su sitio web para indexarla. Se consideran como por defecto.
- Si sus páginas están indexadas, evite bloquearlas en el archivo robots.txt y utilizar simultáneamente Meta Robots. Esto se debe a que, para tener en cuenta la etiqueta Meta Robots, los rastreadores deben rastrear la página, pero el bloquear el archivo robots.txt archivo no les permitirá hacerlo.
- Utilice la etiqueta X-robots para controlar el rastreo de archivos no HTML como: imágenes, PDFs, archivos flash, vídeos, etc.
Capítulo 4: Etiquetas Meta Robots vs Robots.txt: ¿Cuál es mejor para el SEO?
Esto terminó siendo una pregunta con trampa, ya que ambos son importantes para el SEO de su sitio.
Desde la etiquetas meta robots etiquetas y archivos robots.txt no son realmente intercambiables, tendrá que utilizar ambos para proporcionar los parámetros correctos a los rastreadores web
Como el Diario de los Motores de Búsqueda dice: «El archivos robots.txt indican a los rastreadores la totalidad del sitio, mientras que los etiquetas meta robots las etiquetas se centran en una página específica [de un sitio web]. «
Por ejemplo, si quiere desindexar una de sus páginas web de las SERPs de Google, es mejor utilizar una etiqueta meta robots «Noindex» en lugar de una directiva robots.txt
Sin embargo, si quiere prevenir secciones enteras de su sitio web de aparecer en los SERPs, el uso de un archivo robots.txt sería la mejor opción.
Capítulo 5: Otras preguntas sobre las etiquetas Meta Robots
He aquí algunas preguntas frecuentes sobre la etiqueta Meta Robots.
5.1. ¿Qué es la etiqueta robots en SEO?
La etiqueta Meta robots es un trozo de código en la sección de su página web que le da el poder de decidir qué páginas quiere ocultar a los robots de los motores de búsqueda y qué páginas quiere que sigan e indexen.
5.2. ¿dónde se coloca la metaetiqueta robots?
La etiqueta robots es un trozo de código HTML que se encuentra dentro de la sección de una página web. Su función es controlar cómo esa página es rastreada e indexada por los motores de búsqueda.
5.3. ¿Cuáles son los ajustes avanzados de los meta robots?
Estos ajustes le permiten definir los meta robots de una página o publicación:
- No hay índice de imágenes usted prohíbe a los motores de búsqueda rastrear las imágenes de esta página o de este artículo
- No hay archivo sin archivo: Evita que los motores de búsqueda muestren una copia en caché de esta página
- Ningún recorte evita que los motores de búsqueda muestren un fragmento de esta página en los resultados de la búsqueda y evita que almacenen la página en la caché.
Por defecto, este campo está vacío, lo que indica que se respetan los ajustes por defecto. Así que si su sitio por defecto está configurado para indexar/seguir (o si no ha establecido ninguna regla específica o restrictiva), entonces esto debería ser equivalente a «indexar/seguir».
5.4. ¿Puedo olvidarme de los Meta Robots en mi sitio web?
Si todo esto es demasiado, puede omitir con seguridad las etiquetas robots. No es necesario incluirlos, ni siquiera para decir » Todo » o » Índice »
Todos los motores de búsqueda, por defecto, indexarán su página y rastrearán sus enlaces a menos que usted les diga que no lo hagan. El uso de metaetiquetas es completamente opcional.
Sin embargo, si tiene un sitio web complejo o quiere que ciertos contenidos sean menos visibles, la etiqueta meta robots puede ser una buena manera de hacerlo.
Aunque no es una prueba completa, es respetada por los motores de búsqueda y es una forma de controlar cómo utilizan su contenido.
5.5. ¿Añade la metaetiqueta Robots algún beneficio extra para el SEO?
En absoluto. Añadir un etiqueta meta robots la etiqueta meta no le da una «ventaja» o un beneficio adicional respecto a no haberla añadido
No tiene ningún efecto en las clasificaciones de búsqueda, por lo que no es necesario centrarse en el uso de la etiqueta meta robots para mejorar las clasificaciones de búsqueda de una página web.
5.6. ¿Están los motores de búsqueda obligados a seguir la pauta dada en la etiqueta Meta Robots?
No.
Los motores de búsqueda no están obligados a seguir las directrices dadas en la etiqueta meta robots, ya que estas directrices son dadas por usted a título orientativo, y son los motores de búsqueda los que deciden si cumplen o no con esta petición
Dicho esto, en el 99% de los casos, los motores de búsqueda cumplirán su petición y llevarán a cabo las instrucciones proporcionadas en la etiqueta meta robots.
5.7. ¿Añadir una etiqueta Meta Robots a una página web impide el rastreo?
No, añadir una etiqueta Meta Robots a una página no impide ni prohíbe que los robots de los motores de búsqueda rastreen esa página específica. Las arañas de los motores de búsqueda a veces rastrean esa URL para ver si la etiqueta Meta ha cambiado.
De hecho, todo depende de las directrices que haya especificado en el código para esta etiqueta.
5.8. ¿Es una buena idea cambiar la etiqueta Meta Robots muy a menudo en una sección de su sitio web?
No, generalmente no es una buena idea cambiar la etiqueta Meta Robots con frecuencia en secciones específicas de su sitio web
El uso de la etiqueta meta robots debe tener un propósito claro y no debe seguir cambiando de una preferencia a otra, sin un propósito claro en mente.
5.9. ¿Qué es mejor entre la etiqueta meta robots y robots.txt?
El robots.txt son mejores para prohibir una sección entera de un sitio, como una categoría, mientras que un etiqueta meta robot es más eficaz para prohibir archivos y páginas individuales. Pero puede utilizar ambos.
5.10. ¿Qué es una etiqueta meta noindex?
Una etiqueta meta robots noindex le permite prohibir que una página sea indexada por los motores de búsqueda. Excluir una página del índice significa que la página ya no puede aparecer en las SERPs.
En resumen
Si quiere controlar cómo los rastreadores web indexan su sitio, la etiqueta meta robots es un buen mecanismo
Es fácil de entender, fácil de implementar y tiene un impacto significativo en cómo los motores de búsqueda indexan su sitio web.
Si se utiliza correctamente, esta etiqueta garantizará que los motores de búsqueda traten su sitio exactamente como usted desea. Sin embargo, utilizarlo de forma incorrecta puede acarrear inconvenientes, ya que los motores de búsqueda pueden olvidarse de usted.
Por lo tanto, sólo asegúrese de utilizarlo cuando sea necesario y con mucho cuidado.
¡Hasta pronto!
