Essere raggiungibile è solo il primo controllo.
Una pagina aperta nel browser potrebbe avere istruzioni che ne limitano l’indicizzazione, collegamenti insufficienti o altri problemi. Per capire il caso specifico serve esaminare URL, risposta del server e dati disponibili in Search Console.
Robots.txt non significa noindex.
Google spiega che robots.txt regola gli accessi dei crawler e non è un sistema affidabile per tenere una pagina fuori dai risultati. Un URL bloccato può essere conosciuto attraverso altri collegamenti. Per impedire l’indicizzazione sono previste istruzioni diverse, da usare nel contesto corretto.
Evita modifiche alla cieca.
Cambiare tutte le regole del sito può influire su pagine che già funzionano. Prima individuiamo il problema sull’URL e poi scegliamo un intervento mirato.