Un tag Meta Robots è un frammento di codice HTML che fornisce istruzioni ai motori di ricerca su come effettuare il crawling o l’indicizzazione delle pagine di un sito web. Questo le offre un maggiore livello di controllo sul modo in cui determinate pagine vengono indicizzate e visualizzate nelle SERP.
Il sEO è l’arte di controllare il modo in cui il suo sito si collega ai motori di ricerca
Di solito questo significa ottenere la massima visibilità possibile, ma ci possono essere momenti in cui desidera escludere una pagina dalle SERP o limitare il modo in cui i motori di ricerca la utilizzano.
Per farlo, deve dare istruzioni ai motori di ricerca su come vuole che venga trattata una pagina specifica. Un tag chiamato Meta Robots è il modo perfetto perfarlo.
Quindi :
- Che cos’è il tag meta robots e perché è importante?
- Quali sono i diversi tipi di direttive sui robot?
- Come implementare questo attributo in un sito web?
Sono tutte domande alle quali fornisco soluzioni chiare e precise in questa mini-guida.
Andiamo!
Capitolo 1: Quali sono le basi del tag meta robots?
In questo capitolo, mi limiterò a soffermarmi sulle nozioni fondamentali della tag meta robots e le principali ragioni per cui è importante.
1.1 Che cos’è un tag meta robots?
Per dirla in termini semplici, questo meta tag indica ai motori di ricerca quali azioni possono (o non possono) compiere su una determinata pagina
I principali motori di ricerca rispetteranno i comandi inclusi in questo tag.
IMPORTANTE : Questo tag non ha effetto a livello di sito. Può contenere valori diversi in pagine diverse dello stesso sito web.
1.2 Sintassi di base
La sintassi di base del tag meta robots è piuttosto semplice:
<nome meta=”robot“content=”direttive“>
Esempio:
Per utilizzarlo, aggiunga l’attributo alla sezione <testa> sezione di ogni pagina web per fornire istruzioni a crawler
…
.
A differenza del file robots.txt che fornisce istruzioni a livello di sito, l’attributo meta robots si applica solo alla pagina in cui compare.
IMPORTANTE: ILuso corretto della sintassi nella costruzione del tag è estremamente importante, in quanto l’uso di una sintassi errata può avere un impatto negativo sulla presenza e sul posizionamento del suo sito nelle SERP.
1.3. Perché è importante l’uso del tag Meta Robots?
Questo attributo viene utilizzato per controllare l’accesso dei crawler a una pagina e per impedire ai motori di ricerca di indicizzare le pagine che lei non vuole siano indicizzate.
In questo modo si evita di perdere tempo con strisciare pagine del suo sito e quindi aumenta l’efficienza del crawling. Inoltre, le consente di impedire che le pagine vengano visualizzate nelle SERPS e può contribuire a limitare i problemi con contenuti duplicati.
In generale, non sarà necessario utilizzare il meta tag robots. Se vuole massimizzare il suo traffico web e il suo pagerank, in genere lascerà che i motori di ricerca facciano il loro lavoro senza ostacoli
Ma ci possono essere casi specifici in cui ha senso limitare ciò che possono fare.
Per esempio:
- Privacy limitata
Se una pagina non è realmente destinata al grande pubblico, il tag meta robots ridurrà le possibilità che le persone la trovino. Non sarà invisibile e chiunque abbia il link potrà vederlo, ma non apparirà nelle SERPS.
- Una pagina non è pronta per il pubblico
Supponiamo che una nuova funzione del sito sia in versione beta e che lei voglia che solo i suoi dipendenti o alcuni clienti la vedano
Può lanciare la pagina e utilizzare un attributo meta robots per tenere lontano il traffico di ricerca fino a quando non sarà pronta. Tuttavia, si assicuri di rivedere il tag quando vuole andare in onda!
- Link di spam
Non c’è modo più facile di danneggiare il ranking del suo sito che collegarsi a siti web contenenti spam. Ma cosa succede se questo sito contiene effettivamente una grande risorsa che lei vuole condividere con i suoi visitatori?
Utilizzando un tag meta robots il tag può dire ai motori di ricerca di non seguire il linklink, proteggendo così il ranking della sua pagina.
- Protezione dell’immagine
Per la maggior parte delle aziende, è meglio lasciare che le sue immagini (filigranate, attribuite) si diffondano in tutta la rete. Ma se desidera presentare un’immagine senza vederla utilizzata altrove, l’attributo robots può indicare a Google di non farloindice.
Ora che conosce le nozioni di base su questo tag, vediamo le diverse direttive e i suggerimenti per impostarlo su un sito web.
Capitolo 2: Quali sono le principali direttive Robots e come implementarle in un sito web?
In questa sezione, esamineremo diversi modi per implementare le direttive robot a livello di pagina, per indicare agli spider dei motori di ricerca le regole su come trattare le pagine del suo sito.
Poi le darò alcuni suggerimenti per l’utilizzo di questo tag e le tecniche per implementarlo sul suo sito
2.1. Quali sono i diversi tipi di direttive robotiche?
Direttive dei robot le direttive sono sezioni di codice che danno istruzioni ai web crawler sul modo in cui il contenuto di una pagina deve essere analizzato o indicizzato
Esiste una serie di direttive che può utilizzare per comunicare con i motori di ricerca su come gestire le pagine del suo sito
Ecco alcuni esempi e come funziona ciascuno di essi.
2.1.1. Tutti
Questa direttiva indica ai crawler che non ci sono limitazioni al crawling e all’indicizzazione. Funziona in modo simile alla funzione Indice e direttive Seguire.
2.1.2 Indice
La direttiva index indica che i crawler sono autorizzati a indicizzare la pagina. Questo viene preso in considerazione per impostazione predefinita. Non è necessario aggiungerlo necessariamente a una pagina perché venga indicizzata.
2.1.3. Noindex
Se utilizza il codice di cui sopra nella sezione dell’intestazione di una pagina web, sta effettivamente dicendo ai motori di ricerca di non indicizzare il contenuto della pagina e di non visualizzarlo nei risultati di ricerca di Google.
Se la pagina era già indicizzata, questa direttiva dirà al crawler di rimuovere la pagina dall’indice.
2.1.4. Seguire
Quando utilizza questa direttiva in una pagina, dice ai motori di ricerca di seguire tutti i link della pagina e di trasmettere l’autorità dei link.
2.1.5. Nofollow
Se utilizza il codice sottostante nella sezione di testa di una pagina web, sta effettivamente dicendo ai motori di ricerca di non seguire alcun link (sia interno che esterno) in quella pagina e di non trasmettere il pagerank di Google attraverso quei link.
In breve, impedisce ai motori di ricerca di seguire i link di una pagina e di trasmettere qualsiasi equità.
2.1.6. Noindex, Nofollow
Si noti che può combinare diverse direttive in un unico codice e dire più cose contemporaneamente. Ad esempio, il codice qui sotto indica ai motori di ricerca di non indicizzare il contenuto della pagina e, allo stesso tempo, di non seguire alcun link nella pagina.
2.1,7 Noindex, Follow
Allo stesso modo, il codice sottostante proibisce ai motori di ricerca di indicizzare il contenuto della pagina, ma richiede il tracciamento di tutti i link presenti in quella pagina.
2.1.8. Nessuno
Questa direttiva è equivalente a ”noindex, nofollow”. In sostanza, dice ai motori di ricerca che la pagina deve essere ignorata.
2.1.9. Noarchive
Questa direttiva impedisce che i motori di ricerca visualizzino il link in cache nei risultati della ricerca
Può anche essere utilizzato per evitare che i concorrenti facciano lo scraping dei suoi contenuti, il che è particolarmente utile sui siti di e-commerce dove i prezzi vengono aggiornati frequentemente.
2.1.10. Nocache
Questa direttiva è uguale alla direttiva Noarchive ma utilizzata dalla direttiva Internet Explorer e Firefox solo.
2.1.11. Nosnippet
Questa direttiva indica ai motori di ricerca di non visualizzare la descrizione estesa (cioè la meta-descrizione) della pagina nei risultati di ricerca.
Il nosnippet è utile se desidera avere un maggiore controllo su ciò che gli utenti devono vedere sul contenuto del sito, il che potrebbe portare ad un aumento del CTR a seconda della query di ricerca.
2.1.12. Non tradurre
Questa direttiva vieta ai motori di ricerca di suggerire una traduzione della pagina nelle SERP. Questo può essere utile quando non vuole che il contenuto della sua pagina sia tradotto, perché a volte la traduzione automatica non è accurata.
Può anche specificare le sezioni della sua pagina da non tradurre utilizzando una classe:
<…>
2.1.13. Noimageindex
Questa direttiva indica ai motori di ricerca di non indicizzare le immagini nella pagina. Questo è utile se non vuole che altre persone ripubblichino le sue immagini come se fossero i proprietari, soprattutto se queste immagini sono protette da copyright
2.1.14. Non disponibile_dopo
Questa direttiva indica ai motori di ricerca di non visualizzare la pagina nelle SERP dopo una data o un’ora specifica
Questo è utile per le pagine che sono rilevanti per un determinato periodo di tempo, come le pagine di registrazione agli eventi o le landing page promozionali (ad esempio, il Black Friday)
Il contenuto sarà deindicizzato una volta terminato l’evento e non vedrà più apparire la pagina.
Per le pagine con una finestra limitata di tempo utile, è più pratico usare non disponibile_dopo“è più pratico che posizionare un noindex sulla pagina in un secondo momento.
In breve, lo consideri come un tag noindex con un timer.
2.1.15. Noodp
Questa direttiva indica ai motori di ricerca di non utilizzare i metadati di Open Directory Project per i titoli o gli snippet visualizzati per questa pagina. Tuttavia, questo è stato recentemente deprecato.
2.1.16. Max-snippet
Questa direttiva la aiuta a impostare il numero massimo di caratteri che Google deve visualizzare nelle SERP per una pagina. Nell’esempio qui sotto, il numero di caratteri sarà limitato a 150.
2.1.17. Max-video-preview
Questo configurerà un numero massimo di secondi per l’anteprima di uno snippet video. Nell’esempio seguente, Google visualizzerà un’anteprima di 10 secondi
2.1.18. Max-immagine-preview
Questo indica a Google la dimensione dell’immagine che visualizzerà per una pagina nella SERP. Ci sono tre valori possibili:
- Nessuno – Non verrà visualizzato alcuno snippet di immagine;
- Standard – Verrà utilizzata l’anteprima dell’immagine predefinita;
- Grande – È possibile visualizzare l’anteprima più grande possibile.
Ora, a seconda dei requisiti, può utilizzare queste linee guida nel meta tag robots del suo sito web.
2.2 Consigli per l’uso
Molti proprietari di siti che non hanno esperienza di web design possono voler armeggiare con i meta tag per scopi SEO
Non è necessario essere un guru dell’html per modificare il tag meta robot, ma è necessario utilizzare i valori in modo corretto.
Ecco tre cose da tenere a mente:
- Può utilizzare più valori (direttive) può utilizzare più valori (direttive): la loro combinazione le offre un controllo più sfumato e può raggrupparli in un unico tag robot. Basta separare questi diversi valori con delle virgole
Esempio
- Maiuscolo o minuscolo non importa:
Esempio è uguale a
- Gli spazi non contano: Solo virgole sono necessari per separare diversi valori. Gli spazi facilitano la lettura, ma può anche ignorarli
Esempio
2.3. Valori di tag (direttive) contrastanti
È possibile che il suo tag contenga valori contrastanti
Per esempio:
{code type = HTML} {/ code}
Il tag ” Nessuno il tag “dice ai motori di ricerca di non seguire i suoi linkma il tag ” Seguire “Il tag dice loro che devono segua questi link. Questa etichetta dice una cosa e il suo contrario allo stesso tempo.
Dovrebbe sempre controllare i Meta tag quando li inserisce, per evitare questo tipo di situazione. Tuttavia, se accade, non è disastroso, ma porta solo a risultati imprevedibili.
La maggior parte dei motori di ricerca non ha mai dato una risposta pubblica su come gestire un conflitto come questo
Tuttavia, Google ha fatto così, e si affida ancora alla il più restrittivo nell’esempio precedente, Google ignorerà “Seguire”
Ecco un altro esempio:
.
.
La maggior parte dei motori di ricerca sceglierà il “ nosnippet perché è la più restrittiva”.
Yandex ha anche spiegato la sua politica e va con il da impostazione predefinita
Inoltre, se il suo file robots.txt il file è in conflitto con il suo meta tag robotsnon esiste una risposta definitiva sul modo in cui i due aspetti vengono risolti dalla maggior parte dei motori di ricerca.
Vediamo ora le tecniche per implementare il tag meta robots sul suo sito web.
2.4. Come implementare un tag meta robots su un sito web?
Esistono due modi per implementare un tag meta robots, ed entrambi hanno lo stesso effetto sui crawler
2.4.1. Il tagè posizionato nella sezione .
Uno dei modi più comuni per utilizzare il meta tag robots è quello di posizionarlo come meta tag nella sezione head della sua pagina, come in questo caso:
{codice tipo = HTML}
..
…{/code}
Si tratta sempre di una sola riga di codice, che deve essere inserita nella sezione dell’intestazione html della pagina
Se utilizza WordPress.org, ci sono dei plugin che le permettono di manipolare i suoi meta-tag tag da solo o come parte del suo come parte della sua strategia SEO senza modificare direttamente il codice
I tag Meta robots non influiscono sull’aspetto del suo sito web per i visitatori; ciò che fanno dipende dai valori che lei vi inserisce.
Inoltre, posizionando il valore ” robot “nel ” Nome “, si specifica che tutti i crawler devono seguire il valore “ noindex “nell’attributo ” Contenuto ”
In molti casi, potrebbe voler fare riferimento a crawler specifici utilizzando il loro nome di user-agent (utente-agente) nell’attributo “Contenuto” Nome ”
In questo caso, dovrà sostituire il valore “ robot “con ilutente-agente quando vuole seguire una direttiva specifica
Per esempio
Come già detto, un meta tag può contenere diverse direttive in un meta tag robots
.
Allo stesso modo, una pagina può contenere diversi tag Meta Robot, se vuole rivolgersi a diversi interpreti
.
2.4.2. X-Robots-Tag nell’intestazione HTTP
Simile all’uso del meta tag robotsil tag direttive sui robot possono essere applicate come le direttive tag X-Robots nell’intestazione HTTP di un determinato URL
Cioè, qualsiasi direttiva utilizzato nel meta tag può essere applicato anche al tag dell’intestazione HTTP
Per esempio :
Oppure, se desidera fare riferimento a un agente utente specifico nel tag X-Robots, ecco un esempio:
2.5. Strumenti per l’aggiunta di tag Meta Robots a un sito web
Se desidera aggiungere questo attributo al suo sito, può copiare i tag presentati in questo articolo e incollarli nel codice HTML del suo sito
Inoltre, ci sono strumenti che può utilizzare per generare istruzioni personalizzate e per aggiungere automaticamente i tag alle pagine web generate dai sistemi di gestione dei contenuti.
Capitolo 3: Quali sono le migliori pratiche SEO per i tag robot?
A file robots.txt il file indicherà al crawler solo le aree del sito web che può scansionare. Tuttavia, non dirà al crawler se indicizzare o meno.
Per aiutarla, può utilizzare i tag robot per guidare i crawler nell’indicizzazione e in molte altre funzioni
Esistono due tipi di tag robot: il tag Meta Robots e il tag tag X-robots.
3.1. Meta Robots Beacon
Ho già parlato di questo tag sopra. Passiamo al tag X-robots.
3.2. Tag X-Robots
Il tag Meta Robots è simile alla tag X-robots, perché permette di controllare il crawling e l’indicizzazione solo a livello di pagina
L’unica differenza è che il tag X-robots è definito nel tagintestazione HTTP di una pagina per controllare il crawling e l’indicizzazione di un’intera pagina o di elementi specifici di essa
Questo tag X-Robots è utilizzato principalmente per controllo, strisciare e indice pagine pagine non HTML
Esempio di tag X-Robots :
x-robots-tag: noindex, nofollow, nosippet
Come mostrato nell’esempio qui sotto, l’opzione tag X-robots utilizza la stessa serie di direttive del tag Meta Robots. Per implementarlo, è necessario accedere alla cartella .htaccess, .php o del server per modificare le intestazioni.
3.3 Migliori pratiche SEO per i tag Robots
- Non utilizzi il tag Meta Robots e x-robots nella stessa pagina, perché uno dei due diventerebbe ridondante.
- Se non vuole che le pagine siano indicizzate, ma vuole che l’equità del link sia trasmessa alle pagine collegate, deve utilizzare il tag Meta Robots con direttive come noindex, follow. Questa è la tecnica migliore per controllare l’indicizzazione, invece di bloccare con l’opzione file robots.txt.
- Non è necessario aggiungere indice o direttive seguire su ogni pagina del suo sito web per indicizzarlo. Sono considerati come per impostazione predefinita.
- Se le sue pagine sono indicizzate, eviti di bloccarle nel file robots.txt e di utilizzare contemporaneamente Meta Robots. Questo perché, al fine di prendere in considerazione il tag Meta Robots, i crawler devono effettuare il crawling della pagina, ma il tag bloccando il file robots.txt il file non permetterà loro di farlo.
- Utilizzi il tag X-robots per controllare il crawling di file non HTML come: immagini, PDF, file flash, video, ecc.
Capitolo 4: Meta Robots vs tag Robots.txt: quale è meglio per la SEO?
Questa è stata una domanda un po’ trabocchetto, perché entrambi sono importanti per la SEO del suo sito.
Dal momento che il tag meta robots tag e file robots.txt non sono realmente intercambiabili, ma dovrà utilizzarli entrambi per fornire i parametri corretti ai crawler web
Come il Giornale dei motori di ricerca dice: “Il file robots.txt i file di crawler parlano dell’intero sito, mentre i file di tag meta robots i tag si concentrano su una pagina specifica [di un sito web]. “
Per esempio, se desidera deindicizzare una delle sue pagine web dalle SERP di Google, è meglio utilizzare un tag meta robots “Noindex“meta tag” piuttosto che una direttiva robots.txt
Tuttavia, se vuole prevenire intere sezioni del suo sito web, per evitare che appaia nelle SERP, l’utilizzo di un file robots.txt è l’opzione migliore.
Capitolo 5: Altre domande sui tag Meta Robots
Ecco alcune domande frequenti sul tag Meta Robots.
5.1. Che cos’è il tag robots nella SEO?
Il tag Meta robots è un pezzo di codice nella sezione della sua pagina web che le dà il potere di decidere quali pagine vuole nascondere ai robot dei motori di ricerca e quali invece vuole che vengano seguite e indicizzate.
5.2. dove si trova il meta tag robots?
Il tag robots è un pezzo di codice HTML che si trova all’interno della sezione di una pagina web. Il suo ruolo è quello di controllare il modo in cui la pagina viene strisciata e indicizzata dai motori di ricerca.
5.3. Quali sono le impostazioni avanzate per i meta robot?
Queste impostazioni le permettono di definire i meta-robot di una pagina o di una pubblicazione:
- Nessun indice di immagine lei proibisce ai motori di ricerca di scansionare le immagini di questa pagina o di questo articolo
- Nessun archivio nessun archivio: impedisce ai motori di ricerca di visualizzare una copia in cache di questa pagina
- Nessun frammento impedisce ai motori di ricerca di visualizzare uno snippet di questa pagina nei risultati di ricerca e impedisce loro di memorizzare la pagina nella cache.
Per impostazione predefinita, questo campo è vuoto, a indicare che le impostazioni predefinite sono rispettate. Quindi, se il suo sito predefinito è impostato su index/follow (o se non ha impostato alcuna regola specifica o restrittiva), questo dovrebbe essere equivalente a “index/follow”.
5.4. Posso dimenticare i Meta Robot sul mio sito web?
Se tutto questo è troppo, può tranquillamente omettere i tag robots. Non è necessario includerle, anche per dire ” Tutti “o ” Indice ”
Tutti i motori di ricerca, per impostazione predefinita, indicizzeranno la sua pagina e effettueranno il crawling dei suoi link, a meno che lei non dica loro di non farlo. L’uso dei meta tag è del tutto facoltativo.
Tuttavia, se gestisce un sito web complesso o desidera mantenere alcuni contenuti meno visibili, il tag meta robots può essere un ottimo modo per farlo.
Sebbene non sia una prova completa, è rispettata dai motori di ricerca ed è un modo per controllare come utilizzano i suoi contenuti.
5.5. Il meta tag Robots aggiunge qualche beneficio SEO in più?
Per niente. Aggiungere un tag meta robots meta tag non le dà un “vantaggio” o un beneficio aggiuntivo rispetto a non averlo aggiunto
Non ha alcun effetto sulle classifiche di ricerca, quindi non è necessario concentrarsi sull’utilizzo del tag meta robots per migliorare le classifiche di ricerca di una pagina web.
5.6. I motori di ricerca sono tenuti a seguire le linee guida indicate nel tag Meta Robots?
No.
I motori di ricerca non sono tenuti a seguire le linee guida fornite nel tag meta robots, in quanto queste linee guida sono fornite da lei come linea guida e spetta ai motori di ricerca decidere se onorare o meno questa richiesta
Detto questo, nel 99% dei casi, i motori di ricerca onoreranno la sua richiesta ed eseguiranno le istruzioni fornite nel tag meta robots.
5.7. L’aggiunta di un tag Meta Robots a una pagina web impedisce il crawling?
No, l’aggiunta di un tag Meta Robots a una pagina non impedisce o proibisce ai robot dei motori di ricerca di effettuare il crawling di quella pagina specifica. Questi spider dei motori di ricerca a volte effettueranno una nuova scansione dell’URL per vedere se il Meta tag è cambiato.
In effetti, tutto dipende dalle linee guida che ha specificato nel codice di questo tag.
5.8. È una buona idea cambiare il tag Meta Robots troppo spesso su una sezione del suo sito web?
No, in genere non è una buona idea cambiare frequentemente il tag Meta Robots su sezioni specifiche del suo sito web
L’uso del tag meta robots deve avere uno scopo chiaro e non deve continuare a passare da una preferenza all’altra, senza uno scopo chiaro in mente.
5.9. Quale è meglio tra il tag meta robots e robots.txt?
Il robots.txt sono migliori per vietare un’intera sezione di un sito, come ad esempio una categoria, mentre una tag meta robot è più efficace per vietare singoli file e pagine. Ma può usare entrambi.
5.10. Che cos’è un tag meta noindex?
Un tag meta robots noindex le consente di vietare l’indicizzazione di una pagina da parte dei motori di ricerca. L’esclusione di una pagina dall’indice significa che la pagina non può più essere visualizzata nelle SERP.
In sintesi
Se desidera controllare il modo in cui i web crawler indicizzano il suo sito, il tag meta robots è un buon meccanismo
È facile da capire, da implementare e ha un impatto significativo sul modo in cui i motori di ricerca indicizzano il suo sito web.
Se utilizzato correttamente, questo tag farà in modo che i motori di ricerca trattino il suo sito esattamente come lei desidera. Tuttavia, un utilizzo scorretto può causare inconvenienti, in quanto i motori di ricerca potrebbero dimenticarsi di lei.
Pertanto, si assicuri di usarlo quando è necessario e con grande attenzione.
A presto!
