Come possiamo risolvere gli errori URL generati automaticamente una volta per tutte?

La domanda di oggi "Ask An SEO" viene da Bhaumik di Mumbai, che chiede:

“Ho una domanda sugli URL generati automaticamente. La mia azienda aveva precedentemente utilizzato diversi strumenti per generare mappe del sito. Ma di recente abbiamo iniziato a crearli manualmente selezionando gli URL necessari e bloccandone altri in robots.txt.

Stiamo affrontando un problema con più di 50 URL generati automaticamente.

Ad esempio, abbiamo una pagina chiamata URL "parola chiave parola chiave": https://url.com/keyword-keyword/ e abbiamo un'altra pagina URL del Knowledge Center: https://www.url.com/folder/keyword-keyword .

In problemi di copertura, stiamo riscontrando errori nella serie 5xx che ha creato URL totalmente nuovi, come https://test.url.com/keyword-keyword/keyword-keyword. Abbiamo provato molti modi, ma non stiamo ottenendo la soluzione per questo”.

Ciao Bhaumik,

È una situazione interessante in cui ti trovi.

La buona notizia è che gli errori 5XX tendono a risolversi da soli, quindi non preoccuparti di quello.

Il problema della cannibalizzazione che stai affrontando è anche più comune di quanto la maggior parte delle persone pensi.

Con i negozi di e-commerce, ad esempio, potresti avere lo stesso prodotto (o la stessa raccolta di prodotti) in più cartelle.

Allora, qual è quello ufficiale?

Lo stesso vale per la tua situazione nello spazio finanziario B2B (ho rimosso il tuo URL sopra e l'ho sostituito con "parola chiave".)

Per questo i motori di ricerca hanno creato link canonici.

I link canonici sono un modo per dire ai motori di ricerca quando una pagina è un duplicato di un'altra e quale pagina è quella ufficiale.

Facciamo finta che tu venda pantofole da coniglio rosa.

Queste pantofole da coniglio hanno la loro pagina, sono in vendita, appaiono nelle calzature e anche in rosa.

• url.com/products/pink-bunny-slippers.
• url.com/on-sale/pink-bunny-slippers.
• url.com/products/pink/pink-bunny-slippers.
• url.com/category/calzature/pink-bunny-slippers.

Il primo URL sopra è la "versione ufficiale" dell'URL.

Ciò significa che dovrebbe avere un collegamento canonico che punta a se stesso.

Le altre tre pagine ne sono versioni duplicate. Quindi, quando imposti il ​​tuo link canonico, dovrebbe fare riferimento alla pagina ufficiale.

In breve, ti consigliamo di assicurarti che tutte e quattro le pagine abbiano rel="canonical" href="https://url.com/products/pink-bunny-slippers" poiché ciò le deduplica per i motori di ricerca.

Successivamente, assicurati di rimuovere tutte le versioni duplicate dalla tua mappa del sito.

Una mappa del sito dovrebbe contenere le pagine più importanti e indicizzabili del tuo sito web.

Non vuoi includere versioni non ufficiali di una pagina, pagine non consentite da robots.txt e URL non canonizzati nelle tue Sitemap.

I motori di ricerca non eseguono la scansione dell'intero sito Web ogni volta e, se li invii a pagine non importanti, stai sprecando la tua capacità di scansione e indicizzazione adeguate.

C'è un'altra situazione che può verificarsi qui.

Se hai abilitato la ricerca sul sito, può anche creare URL duplicati.

Se digito "pantofole coniglietto rosa" nella casella di ricerca del tuo sito, probabilmente otterrò un URL con la stessa frase chiave nell'URL e anche con parametri su di esso.

Ciò aumenterebbe il tuo problema e il tuo team IT dovrà impostare in modo programmatico i collegamenti canonici ai risultati della ricerca insieme a un meta robot per noindex, segui.

Un'altra cosa da cercare è: se clicco sulla pagina delle pantofole da coniglio rosa dal risultato della ricerca, questi parametri potrebbero rimanere.

Se lo fanno, segui gli stessi passaggi sopra menzionati.

L'uso di link canonici corretti e la garanzia che la tua mappa del sito non abbia pagine non ufficiali aiuterà a risolvere il problema della pagina duplicata e ti aiuterà a non sprecare la visita di un ragno facendogli eseguire la scansione delle pagine sbagliate sul tuo sito.

Spero che questo aiuti!

Più risorse:

• 7 Avvisi ed errori dello strumento di scansione SEO che puoi tranquillamente ignorare
• Devo creare una pagina di destinazione per ogni URL e collegamento al mio sito principale?
• L'ultima checklist per l'audit SEO

Immagine in primo piano: Leremy/Shutterstock