Google: perché i disallowed url possono apparire in SERP?

perché i disallowed url possono apparire in SERP?

Quante volte navigando on line, facendo una ricerca con Google ci imbattiamo in un risultato dove nello snippet leggiamo “nessuna informazione è disponibile per questa pagina”. John Mueller ci spiega cosa è successo nel più importante motore di ricerca al mondo.

Se ci ragioniamo un secondo la cosa non è poi così strana, ma soprattutto dobbiamo dire da subito che non è né un errore di Google né di chi ha indicizzato il sito web.

A dircelo come sempre è John Mueller di Google, questa volta tramite Twitter, dove risponde alla domanda di @trooperbill il quale chiede: “Hi, John. What happens to PageRank for URLs disallowed in robots.txt? Does it disappear like with noindex/nofollow?”.

Master AI

Il sopra citato Mark Rushworth chiede al Senior Webmaster Trends Analyst di Google che cosa succede al PageRank per gli url disallow in robots.txt. Gli url scompaiono come quando si utilizza noindex/nofollow?”.

La risposta già la sappiamo, ed è esattamente ciò che abbiamo anticipato prima. Se un url appare in SERP vuol dire che, in un modo o in un altro, è stato indicizzato.

Tutto ciò avviene semplicemente perché se Google non è autorizzato a eseguire la scansione dell’url, ma le persone si collegano ad esso, Google può “ripescare” tali url.

Ecco perché come dicevamo ad inizio articolo quando si vedono risultati di ricerca dove nello snippet appare la dicitura “nessuna informazione è disponibile per questa pagina” vuol dire che Google ha ricevuto un segnale chiaro che quella pagina web esiste.

Anche perché l’algoritmo di Google individua una pagina web principalmente per due motivi:

  1. se la query è abbastanza specifica
  2. ci sono abbastanza link a quella pagina per dare a Google sufficienti suggerimenti che la pagina è rilevante per la query.

In questo secondo caso Google “raccoglie” (o come dicono gli americani “collect”) l’url se autonomamente non è in grado di eseguire la scansione della pagina per vedere quale contenuto è presente nella stessa.

E raccoglie l’url andando ad utilizzare i link che puntano alla pagina e al suo anchor text per capire di più di cosa si stia parlando.

John Mueller di Google su Twitter ha risposto che “se un url non è consentito per la scansione nel robots.txt, può ancora “raccogliere” i link, poiché può essere mostrato anche in search (senza però il suo contenuto)”.

Certamente non tutti gli addetti ai lavori ritengono questa procedura corretta, anche perché se ci pensiamo bene se un SEO o un webmaster decide di bloccare una pagina web perché non vuole farla vedere a Google, non si capisce il motivo “logico” per cui Google la vada a mettere in SERP.

Permetteteci uno spunto finale, visto che in questi giorni abbiamo parlato molto di link building.

Se siete annoiati e vi piacciono le sfide difficili ricordatevi che tecnicamente si può fare anche link building basata proprio su quegli url disallowed.

Buon divertimento a tutti coloro che decideranno di provare questa nuova strada e fateci sapere nei commenti i risultati che otterrete o che già avete ottenuto con questa strategia SEO.

Master AI

[via seroundtable.com]

 

Master AI

PS: se hai trovato utile questo post e vuoi saperne ancora di più, prova gratis Studio Samo Pro, la nostra piattaforma con oltre 200 corsi pratici.

Piaciuto? Condividilo!

L'autore

Lascia un commento

Il tuo indirizzo email non sarà pubblicato. I campi obbligatori sono contrassegnati *

Questo sito usa Akismet per ridurre lo spam. Scopri come i tuoi dati vengono elaborati.

Iscriviti gratis a…

MakeMeThink

La newsletter di Studio Samo

Ricevi ogni 2 settimane le novità più importanti dal mondo del digital marketing.

Potrebbe interessarti anche...

ai generativa
Jacopo Matteuzzi

AI generativa: cos’è e a cosa serve per il business

Oggi l’AI generativa è uno strumento indispensabile per le aziende. Ma cos’è? E come può aiutare il tuo business?Scopriamo insieme tutto quello che c’è da sapere su questa innovazione e su come può trasformare il modo in cui lavori.

ai marketing
Jacopo Matteuzzi

Che cos’è l’AI Marketing e come sta rivoluzionando il settore

L’AI marketing è forse la più grande innovazione di sempre in quest’ambito. Ma che cos’è esattamente? Come funziona? In questo articolo esploreremo questi aspetti in dettaglio, fornendo esempi pratici e analizzando le implicazioni etiche e sociali.

prompt engineering
Jacopo Matteuzzi

Prompt Engineering AI: cos’è, guida pratica

In questo articolo scoprirai cos’è il prompt engineering, perché è così importante, e soprattutto come può trasformare il tuo modo di lavorare con l’intelligenza artificiale.

Vuoi essere sempre sul pezzo?

Iscriviti a MakeMeThink, la newsletter di Studio Samo. ✉️ Ricevi ogni 2 settimane le novità più importanti dal mondo del digital marketing e AI per il marketing.