Bingbot è un crawler web che esplora e indicizza le pagine web dal suo lancio nell’ottobre 2010 da parte di Microsoft. I dati che crea alimentano Bing, il motore di ricerca fondato da Microsoft. La sua funzione non è molto diversa da quella di Googlebot per Google.
Con tante persone che si rivolgono ai motori di ricerca per trovare prodotti, servizi e le informazioni che desiderano, è essenziale per tutte le aziende sviluppare una forte presenza online
Per farlo, è importante capire come funzionano i principali motori di ricerca, compreso Bing
Bing ha sviluppato un crawler, chiamato Bingbot, per esplorare e indicizzare le pagine web. Per beneficiare dei vantaggi di questo bot, è necessario conoscere :
- Che cos’è ;
- Perché è importante per la SEO;
- E come funziona.
Questi sono alcuni dei punti che tratterò in questa mini-guida.
Cominciamo!
Capitolo 1: Cos’è Bingbot e perché è importante?
In questo primo capitolo vedremo qualche spiegazione in più sul Bingbot e alcuni punti che giustificano la sua importanza.
Tuttavia, prima di parlare di Bingbotvorrei chiarire il concetto di Googlebotperché entrambi svolgono quasi lo stesso ruolo.
1.1. Il concetto di Googlebot
Googlebot è un crawler e indicizzatore utilizzato dal motore di ricerca Google per scoprire, esplorare e indice pagine web
È anche conosciuto come WebCrawler o ragno della rete
Questo robot di Google è una buona fonte di informazioni sul web per creare l’indice di ricerca di Google
In poche parole, Googlebot esamina :
- Quali siti crawlare;
- Quanto velocemente strisciarli;
- E come ottenere nuove pagine
Mantiene costantemente aggiornato il database di Google.
Passiamo al concetto successivo, vale a dire Bingbot :
1.2. Il concetto di Bingbot
Bingbot è anche come Googlebot. Tuttavia, è uno dei cinque web crawler di Microsoft che raccolgono informazioni dal web per creare l’indice del sito web motore di ricerca Bing
La funzione di Bingbot è la stessa di Googlebot.
Vediamo perché bingbot è importante per la SEO.
1.3 Importanza di Bingbot
Bot Bing è importante per la SEO, perché è il modo in cui il suo sito può essere elencato nei risultati di ricerca di Bing
Sebbene Google domini il mercato globale della ricerca, Bing è comunque una delle alternative più popolari e mature
Oltre a questo, avere un’elevata visibilità sul maggior numero possibile di motori di ricerca è molto importante per indirizzare il traffico organico al suo sito web da più fonti.
Una delle cose migliori da fare è quella di usare il file robots.txt per specificare la posizione della sua sitemap a Bingbot.
Una mappa del sito è un elenco di collegamenti in formato XML (sono supportati anche altri formati come i file RSS, Atom e TXT) che Bingbot può leggere per capire dove si trovano tutte le sue pagine e come sono collegate, per esempio indicizzazione indicizzazione più facile.
Può anche inviare la sua sitemap direttamente a Bing via Strumenti per i Webmaster di Bing.
Ora approfondiremo un po’ il concetto di bingbot, parlando di come funziona e di come utilizzarlo.
Capitolo 2: Bingbot – Come funziona e come utilizzarlo
In questo capitolo fornirò le risposte alle seguenti domande:
- Come funziona il bingbot?
- Come si fa a dare o bloccare l’accesso a un sito a bingbot?
- Come verificare se un bingbot è reale?
Cominciamo:
2.1. Come funziona bingbot?
I bingbot consentono ai motori di ricerca di trovare e mantenere i contenuti più attuali per fornire agli utenti risultati di ricerca pertinenti e tempestivi
Essendo il crawler del motore di ricerca Bing, Bot Bing è addestrato a seguire i link sul web e a indicizzare i contenuti che trova, che vengono poi visualizzati nelle SERP di Bing per i termini di ricerca pertinenti.
2.1.1. L’uso della teoria dei grafi
Per trovare ciò che stanno cercando, i crawler utilizzano una branca della matematica chiamata teoria dei grafi. In questo tipo di matematica, i siti web sono trattati come alberi
Gli alberi hanno radici, come la directory che esce dai siti web sotto forma di collegamenti ipertestuali. Ogni collegamento ipertestuale contiene documenti che possono o meno essere rilevanti per il termine di ricerca dell’utente.
Bingbot cerca di visitare tutti questi documenti il più rapidamente possibile. Poi cerca di leggere i loro contenuti, di analizzare le loro immagini e di esplorare i loro link
Infine, una volta che il bot ha esaminato i link presenti sui siti web, ilalgoritmo decide quali risultati sono rilevanti per la query.
2.2) Come dare o bloccare l’accesso a un sito a Bingbot?
I crawler web come Bingbot effettuano costantemente il crawling del web e seguono i link dei siti a cui sono autorizzati ad accedere. Se un sito vuole essere elencato negli indici di Bing, Bingbot deve prima accedervi.
Per fare questo, il file robots.txt deve essere regolato in modo che gli spider dei motori di ricerca, come Bing e Google, possano accedervi
In questo file, può specificare quali file e cartelle un bot deve o non deve indicizzare. Questo impedisce ai bot di trovare i suoi file e le sue cartelle private.
Nella maggior parte dei casi, un utente desidera che il suo sito venga crawlato e indicizzato da Bingbot. Infatti, quando un sito web viene indicizzato, permette di essere visualizzato nei risultati di ricerca e quindi aumenta la sua visibilità
Poiché i motori di ricerca sono comunemente utilizzati dalla maggior parte degli utenti, uno dei modi migliori per ottenere visibilità e generare traffico organico verso il suo sito è quello di ottimizzarli correttamente.
Per aumentare la visibilità in generale, dovrebbe seguire le migliori pratiche SEO.
La SEO è un argomento ampio, ma i consigli generali che si applicano all’ottimizzazione dei siti per Google, come la generazione di contenuti di qualità, pertinenti e tempestivi, si applicano anche a Bing.
2.3) Come verificare l’autenticità di Bingbot?
Bing fornisce strumenti per aiutare Bingbot a trovare e indicizzare correttamente il suo sito. Sfortunatamente, esistono bot senza scrupoli che fingono di essere Bingbot e tentano di effettuare il crawling del suo sito
Molto spesso si tratta di bot maligni che cercano di strisciare il maggior numero possibile di siti web, per trovare una scappatoia che possa essere sfruttata.
A causa di questo malware, Bing mette a disposizione degli utenti degli strumenti per verificare se un determinato bot è legittimamente Bingbot o meno
I server forniranno tronchi di tutti coloro che visitano il suo sito, come ad esempio il dalla stringaagente utente e un indirizzo IP.
Questo stringa dell’agente utente di solito menzionano “bingbot”, ma questo da solo non garantisce l’affidabilità.
Si assicuri di utilizzare lo strumento di verifica Bingbot per assicurarsi che l’accesso sia concesso solo ai crawler dei motori di ricerca giusti.
Lo strumento Verifica Bingbot può essere utilizzato per determinare la legittimità di un bot sospetto
Inserisca l’indirizzo IP di provenienza nel modulo e lo strumento le dirà se si tratta di un Bingbot autentico o meno.
Se il Verifica Bingbot determina che non si tratta di Bingbot, si consiglia di inserire nella lista nera e impedire all’indirizzo IP di accedere al suo sito
Bing fornisce anche un API per l’invio di contenuti. Questo può essere utilizzato per inviare in modo programmatico le informazioni più recenti a Bing ogni volta che una pagina esistente viene modificata o una nuova pagina viene creata
Implementando ilAPI in modo programmaticofa sì che l’invio di contenuti a Bing avvenga in modo automatico, anziché attendere che Bingbot effettui periodicamente una scansione del suo sito e aggiorni le informazioni utilizzate nei risultati della ricerca.
Prima di concludere questa piccola guida, sarebbe interessante se potesse farsi un’idea di come Bingbot è cambiato per diventare più coerente con Googlebot.
Capitolo 3: Come il Bingbot di Bing è diventato Evergreen?
Verso la fine del 2019, Bingbot ha annunciato che sarebbe diventato sempreverdeproprio come Googlebot. Ciò significa che sarà sempre compatibile con la versione recente del browser Microsoft Edge browser basato sulla tecnologia Chromium per il rendering delle pagine web e l’esecuzione di JavaScript.
Per prima cosa, ricordiamo che Googlebot, il crawler e l’indicizzatore di Google, è anche sempreverdee quindi regolarmente aggiornato e sempre compatibile con l’ultima versione del browser Google Chrome.
Microsoft ha annunciato 9 ottobre 2019 (mercoledì):
” Oggi annunciamo che Bing sta adottando Microsoft Edge come motore Bing per l’esecuzione di JavaScript e il rendering delle pagine web. Questo creerà una minore frammentazione del web e renderà l’ottimizzazione dei motori di ricerca (SEO) più facile per tutti gli sviluppatori web. Come forse già saprà, la prossima versione di Microsoft Edge è l’adozione del progetto open source Cromo. Questo aggiornamento significa che Bingbot sarà sempreverde e che ci impegniamo ad aggiornare regolarmente il nostro motore di rendering delle pagine web all’ultima versione stabile di Microsoft Edge “
Da questo annuncio, si evince che i SEO e gli sviluppatori avranno ora più facilità nel far strisciare le pagine dei loro siti dai motori di ricerca.
Non dovranno più applicare strategie diverse per ogni motore di ricerca, soprattutto Bing e Google.
La modifica è più o meno la stessa di Googlebot, ma se ha un problema con questa modifica, si assicuri che il sito sia registrato con Bing Webmaster Tools.
Registrando il suo sito con Strumenti per i Webmaster di Bingle verrà notificato qualsiasi problema rilevato da Bing dopo il crawling del suo sito.
Questa alternativa a Bing va accolta con favore, in quanto consente di utilizzare la stessa tecnica SEO su entrambi i principali motori di ricerca: Google e Bing.
Vediamo alcune delle domande che vengono spesso poste su Bingbot.
Capitolo 4: Altre domande su Bingbot
4.1. Per cosa viene utilizzato Bingbot?
Bingbot di Microsoft effettua il crawling e l’indicizzazione delle pagine web, proprio come la controparte di Google, Googlebot.
4.2) Come può impedire a Bingbot di accedere al suo sito web?
Può concedere o negare a Bingbot l’accesso a parti specifiche del file robots.txt del suo sito web.
4.3. Come posso controllare Bingbot?
Microsoft offre un strumento gratuito che le consente di inserire un indirizzo IP per vedere se il bot che ha avuto accesso al suo sito era il vero Bingbot.
4.4. Bingbot è rilevante per la SEO?
Sì, perché senza Bingbot, il suo sito non apparirà nei risultati di ricerca di Bing. Anche se Google è ancora il leader del mercato, Bing può aiutarla a ottenere più traffico.
4.5. Cosa sono i bot e i crawler?
I web crawler, noti anche come web spider o internet robot, sono programmi che scorrono il web in modo automatizzato per indicizzare i contenuti rilevanti
I crawler possono esaminare tutti i tipi di dati, come i contenuti, i link di una pagina, i link non funzionanti, le sitemap e la validazione del codice HTML.
4.6. Come faccio a sapere se un bot ha effettuato il crawling del mio sito web?
Se vuole verificare se il suo sito web è influenzato dal traffico bot, il posto migliore per iniziare è Google Analytics
4.7. Come posso prevenire gli attacchi bot sul mio sito web?
- Blocca i provider di hosting e i servizi proxy conosciuti;
- Protegga ogni punto di accesso per i bad bot;
- Valutare attentamente le fonti di traffico;
- Indagare i picchi di traffico;
- Monitora i tentativi di accesso non riusciti;
- Presti particolare attenzione alle violazioni pubbliche dei dati.
4.8. Che cos’è un indirizzo IP?
Un indirizzo IP è un indirizzo unico che definisce il tipo di dispositivo sul web o su una rete locale. IP è l’acronimo di “Internet Protocol”, che rappresenta l’insieme di regole che governano il formato dei dati inviati in rete o in una rete locale.
In sintesi
Bingbot è il web crawler di Bing e funziona più o meno come Googlebot di recente. Pertanto, anche se il suo sito web è ottimizzato per Google, tenderà a posizionarsi bene nelle SERP del motore di ricerca Bing.
Tuttavia, non dimentichi di aggiungerlo a Bing Webmaster Tools e di controllare i bingbot che effettuano il crawling del suo sito per bloccare l’accesso ai bot maligni.
Questa è la fine di questa mini-guida. Se le è piaciuto, non dimentichi di condividerlo e di lasciare un commento se ha altri dubbi?
Grazie e a presto!
