I migliori approfondimenti da "I limiti dei motori di ricerca e come possiamo superarli"

Il 30 novembre 2021, Bartosz Goralewicz e Tomasz Rudzki si sono incontrati con Fabrice Ca nel, Principal Program Manager di Bing, per discutere delle sfide che i motori di ricerca devono affrontare in questo momento: come continuare a scansionare e indicizzare il Web che diventa costantemente più pesante e più grande ?

Se vuoi sapere come è andata l'intera conversazione, puoi guardare il webinar qui.

In questo articolo, voglio presentare gli approfondimenti e gli annunci più interessanti del webinar.

IndexNow aiuta a ottimizzare il crawl budget

La conversazione è iniziata con un argomento popolare nel settore SEO in questo momento: quale problema sta cercando di risolvere IndexNow?

I motori di ricerca non hanno idea di cosa sta succedendo su Internet. Quindi devono continuare a eseguire la scansione delle pagine per scoprire se sono presenti contenuti aggiornati o nuovi. Di conseguenza, potrebbero sprecare il budget di scansione su pagine di bassa qualità o pagine che non sono state aggiornate.

Crediamo che sia positivo per il settore cambiare questo modello. Ti aiuterà a ottenere i contenuti più recenti indicizzati nei motori di ricerca e puoi aiutarci a ridurre al minimo la scansione, il che è positivo per l'intero settore.

fonte: Fabrice Canel

I motori di ricerca non sanno quando pubblicherai il tuo prossimo articolo sul blog, ma lo sai! La notifica di nuovi contenuti sul tuo sito porta vantaggi reciproci : i tuoi contenuti possono apparire più rapidamente in SERP e i motori di ricerca possono ridurre la quantità di risorse di cui hanno bisogno per eseguire la scansione e l'indicizzazione di un sito Web.

La soluzione per eseguire il ping dei motori di ricerca non è un'idea nuova. Alcuni anni fa, i webmaster potevano inviare URL ai motori di ricerca. Il problema era che era facile inviare spam ai motori di ricerca con invii non necessari, quindi doveva essere migliorato.

Rispetto alla vecchia soluzione con un semplice ping inviato ai motori di ricerca, IndexNow aggiunge un livello di fiducia. Devi generare una chiave API e ospitarla sul tuo sito web. In questo modo, i motori di ricerca possono verificare che l'URL inviato ti appartenga, riducendo al minimo il rumore nei dati risultanti.

Le Sitemap non bastano

Se ti stai chiedendo perché le mappe dei siti ben ottimizzate non sono sufficienti per supportare la scansione e perché abbiamo ancora bisogno di IndexNow, la risposta è: le mappe dei siti non sono sufficienti!

In generale, Bing proverà a scaricare le mappe dei siti più o meno una volta al giorno. […] Ma Internet è più di una volta al giorno. Non vuoi aspettare un giorno quando hai un comunicato stampa in arrivo. Forse è necessario avvisare immediatamente i motori di ricerca.

fonte: Fabrice Canel

Quindi IndexNow ti aiuta a inviare i tuoi contenuti ai motori di ricerca quando è urgente. Ciò è particolarmente importante per i siti Web di notizie, ma è particolarmente importante per qualsiasi sito Web indicizzare i nuovi contenuti il ​​più rapidamente possibile.

Inoltre, le mappe dei siti sono ottime per elencare gli URL ma non tanto per aggiornare il contenuto. Il tag lastmod viene spesso abusato e impostato in modo errato.

IndexNow è meno rumoroso delle mappe dei siti. Fabrice ha affermato che i dati provenienti da IndexNow sono molto promettenti e ha dimostrato di guidare i robot verso contenuti di alta qualità e ridurre al minimo la scansione.

Una delle cose da ricordare è che se invii il tuo URL anche se non è cambiato, Bing potrebbe perdere la fiducia e smettere di eseguire la scansione della pagina dopo aver utilizzato IndexNow.

Tutto ciò non significa che dovresti smettere di usare le Sitemap XML. Fabrice ha sottolineato che le mappe dei siti funzionano particolarmente bene se abbinate all'utilizzo di IndexNow: non è che dovresti usare l'una o l'altra.

Cloudflare ora supporta IndexNow

Durante il webinar, Fabrice ha annunciato che Cloudflare ora supporta IndexNow.

Cloudflare ha una funzione chiamata Suggerimenti crawler, che fornisce dati ai motori di ricerca sulle modifiche ai tuoi contenuti. E ora, i suggerimenti del crawler supportano IndexNow e possono notificare direttamente ai motori di ricerca qualsiasi contenuto nuovo, aggiornato o eliminato tramite questo nuovo protocollo.

Più di 60.000 siti Web hanno già ottimizzato la capacità in Cloudflare di supportare IndexNow. Significa miliardi di URL al giorno che vengono a dirci cosa è cambiato su Internet. […] Offre vantaggi per Bing e altri motori di ricerca, nonché per i proprietari di siti Web.

fonte: Fabrice Canel

Tutto quello che devi fare è abilitare i crawler Hints sul tuo sito web con un semplice clic e Cloudflare si occuperà del resto! Puoi trovare maggiori informazioni su come attivare i suggerimenti per i crawler qui.

IndexNow non aumenta il ranking

Bartosz ha chiesto a Fabrice del fatto che molti domini che hanno iniziato a utilizzare IndexNow sembrano ricevere un aumento del traffico da Bing ora. Ma no, IndexNow non ti dà alcun aumento di ranking.

Non diamo priorità in base a IndexNow. Non è un segnale di classifica. L'abilitazione di IndexNow non ti aiuterà a posizionarti più in alto.

fonte: Fabrice Canel

Tuttavia, con la quantità di contenuti Internet che viene continuamente creata, prima vieni indicizzato, maggiori sono le possibilità di apparire più in alto nelle SERP.

È particolarmente importante per i siti con sezioni di notizie. È fondamentale essere indicizzati il ​​prima possibile. Se i motori di ricerca sono in ritardo con la scansione e l'indicizzazione dei tuoi contenuti, potresti rimanere indietro rispetto alla concorrenza.

Ecco perché i siti Web che utilizzano IndexNow potrebbero fare meglio nelle SERP. I webmaster sanno meglio quando il loro contenuto è cambiato e possono notificare ai motori di ricerca di eseguire rapidamente la scansione e l'indicizzazione della pagina.

IndexNow libera le risorse necessarie per il rendering

Come Fabrice ha menzionato nel webinar, il rendering è fondamentale per i motori di ricerca per comprendere il contenuto. Ecco perché Bing si impegna a rendere quanto più contenuto possibile.

Adottando IndexNow, puoi aiutare i motori di ricerca a liberare le risorse per la scansione di contenuti aggiuntivi, come JavaScript, necessari per il rendering della pagina.

Inoltre, il rendering del sito web dipende dalle sue dimensioni. I motori di ricerca potrebbero fare bene con il rendering se hai solo poche pagine. Tuttavia, se sei un grande sito di eCommerce con milioni di pagine piene di contenuti ricchi di JavaScript, le loro risorse potrebbero non essere sufficienti per eseguire il rendering di tutto. In questo caso, è fondamentale informare i bot dei motori di ricerca su ciò che devono scansionare e aiutarli a risparmiare il budget di scansione.

In pochi anni, vogliamo essere in grado di eseguire il rendering di tutti i contenuti su Internet. Tuttavia, sii ragionevole nella creazione dei tuoi siti: se i clienti devono fare clic su qualcosa in una pagina per accedere ad alcuni contenuti, i motori di ricerca dovranno fare lo stesso, ma non sono ancora più intelligenti dei clienti. Assicurati che tutto il contenuto di una pagina venga visualizzato immediatamente e non nasconderlo.

fonte: Fabrice Canel

Futuro della collaborazione sui motori di ricerca

In passato, i motori di ricerca hanno collaborato a iniziative essenziali come schema.org o il protocollo robots.txt.

Durante il webinar, a Fabrice è stato chiesto quali sono le potenziali aree in cui tale cooperazione potrebbe verificarsi nel prossimo futuro. Ha sottolineato il problema dei tag hreflang e di come sono responsabili della generazione di trilioni di URL ridondanti che generano rifiuti per i motori di ricerca e Internet in generale.

Fabrice ha affermato che è il suo desiderio di lavorare con altri motori di ricerca per trovare nuovi modi per rivolgersi ai mercati internazionali che consentirebbero anche ai motori di ricerca di consolidare i segnali in una singola pagina per una lingua. Ciò dovrebbe comportare una soluzione per i proprietari di siti Web per indirizzare gli utenti della stessa lingua a contenuti destinati a mercati specifici (ad esempio, gli spagnoli in Argentina e Uruguay atterrerebbero sulla stessa pagina e quindi sarebbero indirizzati a contenuti specifici di Argentina e Uruguay) .

Fabrice ha riassunto che in futuro non dovrebbe essere necessario ottimizzare il tuo sito Web per motori di ricerca specifici. Invece, i motori di ricerca dovrebbero seguire protocolli comuni e creare soluzioni per migliorare le attuali limitazioni e avvantaggiare l'industria.