Meta robots: cos’è e come usarlo per la SEO

I meta robots non sono macchine umanoidi uscite dai cartoni animati, ma comandi necessari per la SEO tecnica. Scopri come influiscono sull'indicizzazione e il posizionamento di un sito web.
Meta robots: cos'è e come usarlo per la SEO
Indice dei contenuti

Il meta robots è uno dei tag che deve conoscere chi si occupa di SEO, perché è un comando spesso indispensabile per dare una precisa indicazione al motore di ricerca che deve indicizzare e successivamente posizionare una pagina web.

Quando si parla di meta robots è importante discriminare tra Google e motori di ricerca in generale, vedremo di seguito il motivo di questa precisazione.

Andiamo a capire meglio la funzione e le peculiarità di questo tag che potrebbe causare problemi se utilizzato impropriamente.

Studio Samo Pro Minidegree

Meta tag robots: cos’è e perché si usa?

Il meta tag robots è una stringa di codice che viene inserita in una pagina HTML per comunicare ai crawler dei motori di ricerca informazioni riguardanti l’archiviazione e la gestione del contenuto presente nella pagina stessa.

Attraverso questo comando ufficiale di Google si può dire o almeno suggerire il comportamento che deve tenere il software che arriva a “leggere” la pagina e che deve stabilire se essa può essere indicizzata.

Si usa il meta tag robots per non lasciare che i motori di ricerca agiscano liberamente quando mettono sotto le loro lenti d’ingrandimento digitali i siti web. Ad esempio è necessario se si desidera che una pagina non venga indicizzato, ma è utile anche per gestire la meta description o i link della pagina.

È importante non confondere il meta tag robots con il robots.txt. Quest’ultimo è un vero e proprio file di testo che apre o chiude l’accesso di una pagina o di una risorsa di un sito ai crawler, quindi non è una stringa di codice HTML paragonabile a un tag.

Meta name robots e content: sintassi e funzioni

Il meta tag robots può essere inserito nell’head della pagina HTML e deve avere una precisa sintassi composta dagli attributi “name” e “content”.

Il modo migliore per capire come è composta la stringa di codice è mostrare gli esempi pubblicati da Google nella sezione developers:

<!DOCTYPE html>
<html><head>
<meta name=”robots” content=”noindex” />
(…)
</head>
<body>(…)</body>
</html>

Con questa comando si dice ai crawler di tutti i motori di ricerca di non inserire la pagina nella SERP.

È il momento di spiegare meglio perché questo tag può essere usato per “parlare” in generale ai software di analisi dei motori di ricerca o per comunicare specificamente con uno di essi.

Se l’obiettivo è non far inserire la pagina nell’indice di Google, nella stringa di codice deve essere citato chiaramente il Googlebot:

<!DOCTYPE html>
<html><head>
<meta name=”googlebot” content=”noindex” />
(…)
</head>
<body>(…)</body>
</html>

Con la stessa tecnica si possono dare indicazioni precise a specifici robots.

Studio Samo Pro Minidegree

Continuando con gli esempi presenti nella pagina di Big G dedicata alle “specifiche relative al meta tag robots”, si possono impartire i seguenti comandi:

<meta name=”googlebot-news” content=”noindex” />

Questa stringa permette di evitare l’indicizzazione da parte del crawler di Google News, mentre la consente a tutti gli altri.

Al contrario, scrivendo name=”robots” il comando viene recepito da tutti i crawler.

È importante sottolineare che i comandi impartiti dai meta tag robots sono recepiti dai motori di ricerca solo se le pagine in cui sono inseriti non sono bloccate dal file robots.txt. Ovviamente se ad un crawler viene detto di non analizzare una pagina, non potrà nemmeno leggere l’eventuale “noindex”.

X robots tag: cos’è?

Gli x robots tag devono essere usati per impartire gli stessi comandi dei meta robots ai file contenenti immagini o documenti PDF, ovvero contenuti non HTML.

Google a proposito di questo argomento dice che:

“X-Robots-Tag può essere utilizzato come elemento della risposta dell’intestazione HTTP di un URL specifico. Qualsiasi istruzione utilizzabile in un meta tag robots può anche essere specificata come un X-Robots-Tag.”

Un esempio di x robots tag – noindex è il seguente:

HTTP/1.1 200 OK
Date: Tue, 25 May 2010 21:42:43 GMT
(…)
X-Robots-Tag: noindex
(…)

Si possono combinare diverse istruzioni all’interno di una risposta HTTP e indicare specifici user agent prima delle istruzioni, così da dare indicazioni mirate e non generiche.

Esempio Google:

HTTP/1.1 200 OK
Date: Tue, 25 May 2010 21:42:43 GMT
(…)
X-Robots-Tag: googlebot: nofollow
X-Robots-Tag: otherbot: noindex, nofollow
(…)

Principali comandi robots HTML

Se non si danno indicazioni ai motori di ricerca le pagine sono di default intese come index e follow, quindi indicizzabili e seguibili.

È invece possibile dare una serie di comandi per fare in modo che i crawler si comportino come vogliamo. Vediamo i principali.

Meta noindex

Usando il comando noindex si dice al motore di ricerca di non mettere nel proprio indice la pagina e di conseguenza di non mostrarla in SERP per dare riposta a query proposte dagli utenti.

Meta nofollow

Con questo tag si suggerisce al motore di ricerca di non seguire i link presenti nella pagina. Questa istruzione influenza il ranking delle pagine linkate, perché non viene trasmesso PageRank.

Meta none

Se non si vogliono utilizzare unitamente i due meta tag robots noindex e nofollow per dire al motore di ricerca di non indicizzare e di non seguire i link di una pagina, si può usare più semplicemente il comando none.

Lapidariamente, Google a proposito di questo tag dice che è “equivalente a noindex, nofollow”.

Meta noarchive

Il robots noarchive non permette di creare una copia della pagina nella cache e quindi evita che essa venga visualizzata dagli utenti che digitano una richiesta sul motore di ricerca.

È un ordine che al crawler suona come “non mostrare un link copia cache nei risultati di ricerca”.

Meta noimageindex

Non indicizzare le immagini presenti nella pagina, questo è il messaggio che si dà alla mente digitale di Google e degli altri motori di ricerca che accettano tale comando.

Meta nosnippet

Il nosnippet è un meta tag robots accettato solo da Google e serve a non mostrare in SERP la parte testuale dello snippet o l’anteprima di un video, però non blocca la visualizzazione di una miniatura statica di un’immagine, se il motore di ricerca stabilisce che essa migliora la UX.

Capito perché la SEO non può fare a meno dei meta robots?

Attraverso i meta tag robots si guida il motore di ricerca durante il processo di scansione dei siti web, dandogli indicazioni inequivocabili che lo agevolano in un’attività che altrimenti brucerebbe risorse in operazioni non utili.

Inserendo opportunamente i meta robots nelle pagine si possono risolvere problemi tecnici che penalizzerebbero il posizionamento e gestire i contenuti da mostrare o meno agli utenti che fanno ricerche online.

Studio Samo Pro Minidegree
Vuoi dare una svolta alla tua carriera o innovare la tua azienda?

Scopri il nostro corso in Web & Digital Marketing

54 ore in aula a Bologna o in live streaming

Piaciuto? Condividilo!

L'autore di questo post

Lascia un commento

Il tuo indirizzo email non sarà pubblicato. I campi obbligatori sono contrassegnati *

Questo sito usa Akismet per ridurre lo spam. Scopri come i tuoi dati vengono elaborati.

Iscriviti gratis a…

MakeMeThink

La newsletter di Studio Samo

Ricevi ogni 2 settimane le novità più importanti dal mondo del digital marketing.

Potrebbe interessarti anche...

google ads ecommerce
Giulia Venturi

Google Ads per e-commerce: strategie, consigli e idee

Hai un ecommerce e hai deciso di promuoverlo con Google Ads? Ottima idea! Ci sono diverse soluzioni interessanti che ti aiuteranno a vendere al meglio: è importante tenere presente che soprattutto per queste tipologie di campagne che sfrutteranno tutta la potenza dell’AI di Google, c’è un importante lavoro manuale da fare. Rimboccati le mani e partiamo!

google business profile
Ilaria Nardinocchi

Google Business Profile

Scopri come il Google Business Profile (ex Google My Business) può potenziare la tua attività locale!
Sei curioso di sapere come il Google Business Profile può aiutarti a raggiungere nuovi clienti e far crescere la tua attività? Leggi l’articolo fino in fondo e scopri tutti i miei suggerimenti!

ottimizzare campagne facebook ads
Luca Bolelli

Ottimizzazione le campagne e il budget di Facebook Ads

Se sei un/una advertiser alla ricerca della performance, che punta a migliorare i risultati delle campagne Facebook Ads e che conosce l’importanza di padroneggiare ogni aspetto del processo pubblicitario online, allora questo articolo fa per te!

heading tag seo
Angela Giampaglia

Heading Tag: cosa sono e come ottimizzarli per la SEO

Gli Heading Tag sono un elemento fondamentale per la struttura e l’ottimizzazione delle pagine web, in quanto rappresentano la chiave per rendere le pagine leggibili e fruibili. In questo articolo potrai imparare usarli per strutturare testi e articoli, migliorarne la leggibilità , ottenere visibilità su Google… e trasformati un un architetto SEO!

Quota impression Google ads
Beatrice Romano

Quota impression Google Ads

La quota impressioni Google Ads ti permette di capire se i tuoi annunci sono visibili sulla rete di ricerca. Non solo ti aiuta a monitorare i competitor, ma anche a capire come migliorare i tuoi annunci per aumentare la visibilità.

Oltre all’attività dei competitor, la visibilità dipende da budget e ranking dell’annuncio, fattori che puoi controllare per migliorare la tua posizione in serp.

Vuoi essere sempre sul pezzo?

Iscriviti a MakeMeThink, la newsletter di Studio Samo. ✉️ Ricevi ogni 2 settimane le novità più importanti dal mondo del digital marketing.

Iscriviti gratis a

MakeMeThink

La newsletter di Studio Samo

Ricevi ogni 2 settimane le novità più importanti dal mondo del digital marketing.