admin
Configurazione del file robots.txt per i motori di ricerca
Robot. txt è uno degli strumenti SEO tecnici di base. Ti aiuta a controllare quali pagine del tuo sito possono essere scansionate dai motori di ricerca, incluso Google.
Impostazione corretta dei robot. txt consente di velocizzare l'indicizzazione, evitare duplicati e proteggere le sezioni di servizio del sito.
Che cos'è robots. txt
robot. txt è un file di testo che viene inserito nella radice del sito:
Contiene istruzioni per i motori di ricerca come Ricerca Google.
Direttive di base sui robot. txt
1. Agente utente
Indica a quale robot si applica la regola:
Agente utente: *
* - significa per tutti i robot di ricerca.
2. Non consentire
Non consente l'accesso a determinate pagine o sezioni:
Disallow: /admin/
Disallow: /cart/
Disallow: /cart/
3. Consenti
Consente l'accesso a pagine specifiche:
Consenti: /blog/
4. Mappa del sito
Indica il percorso della mappa del sito:
Mappa del sito: https://example. com/mappa del sito. xml
Пример правильного robots. txt
Agente utente: *
Disallow: /admin/
Disallow: /checkout/
Consenti: /
Mappa del sito: https://esempio. com/mappa del sito. xml
Disallow: /admin/
Disallow: /checkout/
Consenti: /
Mappa del sito: https://esempio. com/mappa del sito. xml
📌 Questo è:
-
gestione e chiusura delle impostazioni
-
schede di installazione per indici
Opzioni
1. Elenco completo degli indici
Non consentire: /
❌ Chiudi il tuo sito di Google
Chiudi CSS e JS
Non consentire: /wp-content/
❌ Puoi aprire il sito
📌 Soluzione: non chiudere le risorse
3. Elimina la mappa del sito
Senza la carta del sito del robot, seleziona le pagine.
4. I collegamenti non consentiti
I risultati dell'URL di destinazione sono protetti.
Come provare robots. txt
Через браузер
Откройте:
Tramite Google Search Console
-
Controllo dei robot. txt
-
Analisi degli errori di scansione
Consigli per la configurazione
-
Chiudi le pagine di servizio (pannello di amministrazione, carrello, filtri)
-
Lascia aperti i contenuti che devono essere classificati
-
Aggiungi un collegamento alla mappa del sito. xml
-
Non bloccare CSS e JS
-
Controlla regolarmente il file dopo le modifiche
robot. txt e SEO
Robot. txt non garantisce che le pagine verranno rimosse dall'indice, ma:
-
gestisce il budget di scansione
-
aiuta a indicizzare le pagine importanti più velocemente
-
riduce il carico del server
Punto importante
Se è necessario rimuovere completamente una pagina dalla ricerca: utilizzare:
-
meta tag
noindex -
o strumenti in Google Search Console
robot. txt è uno strumento SEO semplice ma potente. Una corretta configurazione aiuta i motori di ricerca a comprendere correttamente la struttura del sito e a promuoverlo più velocemente su Google.
Vedi anche
Struttura dell'URL è il formato e la costruzione degli indirizzi di pagina su un sito. Gli URL configurati correttamente aiutano gli utenti e i motori di ricerca a comprendere meglio il contenuto della pagina. Una buona struttura dei collegamenti è una parte importante dell'ottimizzazione SEO del sito web . Che cos'è un URL URL (Uniform Resource Locator) è l'indirizzo di una pagina su Internet. URL di esempio: com/blog/seo-optimizaciya Questo indirizzo è composto da diverse parti: https:// - protocollo di connessione sito. com - dominio del sito /blog/ - sezione del sito /seo-optimizaciya - pagina specifica Perché la struttura degli URL è importante per il SEO I buoni URL aiutano i motori di ricerca a comprendere più velocemente l'argomento di una pagina e migliorano l'usabilità del tuo sito. Vantaggi principali: migliore indicizzazione delle pagine aumento della percentuale di clic nella ricerca struttura chiara del sito comoda navigazione per utenti
Gli errori di indicizzazione sono uno dei motivi più comuni per cui un sito web non appare nelle ricerche o perde posizionamento. Se le pagine non vengono indicizzate, semplicemente non esistono per il motore di ricerca. Di seguito è riportata una guida dettagliata su come individuare e risolvere tali problemi. L'indicizzazione è il processo mediante il quale Ricerca Google aggiunge le pagine del sito al proprio database. Solo dopo potranno apparire nei risultati di ricerca. Errori di indicizzazione gravi 1. La pagina è chiusa dall'indicizzazione Verifica la presenza del meta tag: Se è presente, la pagina non verrà indicizzata. 📌 Soluzione: sostituisci noindex con index. 2. Errori nei robot. txt Robot. txt potrebbe impedire la scansione: Non consentire: / 📌 Soluzione: assicurati che le pagine importanti siano aperte: Agente utente: * Consenti: / 3. Pagina non aggiunta alla mappa del sito Se non disponi di una mappa del sito. xml, è più difficile per un motore di ricerca
Codice pulito del sito web è un codice HTML, CSS e javascript adeguatamente strutturato, ottimizzato e comprensibile. Tale codice è facile da leggere per gli sviluppatori e può essere elaborato dai robot di ricerca senza problemi. La qualità del codice influisce direttamente sulla velocità del sito, sull'indicizzazione e sul posizionamento SEO. % veloce da caricare facile da leggere e gestire conforme agli standard di sviluppo web Più semplice e ordinato è il codice del sito, più facile sarà per i motori di ricerca analizzare le pagine. Perché un codice pulito è importante per il SEO 1. Migliora la velocità di caricamento del sito Se il codice contiene molti script, stili o elementi inutilizzati non necessari, la pagina si carica più lentamente. Sito lento: si posiziona peggio perde visitatori più velocemente peggiora i fattori comportamentali Il codice pulito aiuta le pagine si caricano più velocemente. 2. Semplifica l'indicizzazione del sito I robot di ricerca analizzano
Che cos'è una mappa del sito. xml Mappa del sito. xml è un file speciale del sito che elenca tutte le pagine importanti della tua risorsa. Aiuta i motori di ricerca a trovare e indicizzare le pagine più velocemente. Il file viene creato in formato XML e solitamente si trova in: com/mappa del sito. xml I motori di ricerca come Google e Yandex utilizzano questo file come mappa del sito. Grazie ad esso, i robot di ricerca comprendono la struttura del sito e trovano nuove pagine più velocemente. Perché hai bisogno di una mappa del sito. xml 1. Velocizza l'indicizzazione del sito Quando una nuova pagina appare sul sito, il robot di ricerca potrebbe non trovarla immediatamente. La mappa del sito dice al motore di ricerca che la pagina esiste e deve essere indicizzata. % 2. Aiuta i robot di ricerca a comprendere la struttura del sito Nella mappa del sito puoi indicare: quali pagine sono le più importanti quando è stata aggiornata la pagina quanto spesso modifiche Questo aiuta i
Cos'è un URL Canonical Un URL Canonical è un tag speciale che indica ai motori di ricerca quale versione di una pagina è quella principale, nel caso in cui siano presenti sul sito più pagine con contenuti identici o molto simili. Viene utilizzato per contrastare il contenuto duplicato, che può influire negativamente sulla SEO. Il tag canonical viene inserito nel codice HTML della pagina e si presenta così: Questo tag comunica ai motori di ricerca come Google e Yandex che questo URL specifico deve essere considerato quello principale. Perché serve un URL Canonical 1. Risolve il problema delle pagine duplicate Sul sito possono comparire pagine identiche con URL differenti. Ad esempio: Il motore di ricerca potrebbe considerarle pagine distinte. Il tag canonical specifica che la pagina principale è unica. 2. Trasferisce il peso SEO alla pagina principale Se più pagine contengono lo stesso materiale, i link in entrata potrebbero frammentarsi tra di esse. Il canonical aiuta a
Oggi più del 70% degli utenti accede ai siti web da smartphone. Pertanto Google è passato al principio del Mobile-First Indexing: ciò significa che la versione mobile del sito viene valutata per prima. Se un sito non funziona bene su un telefono, perde classifiche di ricerca e clienti. Cos'è l'ottimizzazione mobile L'ottimizzazione mobile sta configurando un sito web per una corretta visualizzazione e un funzionamento veloce su smartphone e tablet. Il responsive design è un approccio in cui un sito web si adatta automaticamente alle dimensioni dello schermo. % velocità di caricamento leggibilità del testo corretta visualizzazione degli elementi Se un sito non è adattato, riceve una valutazione inferiore. Principali errori nella versione mobile 1. Il sito non è adattato allo schermo L'utente deve ingrandire la pagina. 📌 Soluzione: utilizza il responsive design 2. Il testo è troppo piccolo Il testo è difficile da leggere senza ingrandimento. 📌 Soluzione: dimensione
HTTPS è una versione sicura del protocollo HTTP utilizzata per trasferire dati tra un sito e un utente. Affinché HTTPS funzioni, sul sito è installato un certificato SSL che crittografa i dati e rende sicura la connessione. Oggi HTTPS non è solo un problema di sicurezza, ma anche un fattore importante nell'ottimizzazione SEO. Cosa sono HTTPS e SSL SSL (Secure Sockets Layer) è una tecnologia di crittografia dei dati. Protegge le informazioni trasferite tra il browser dell'utente e il server del sito. Quando in un sito è installato un certificato SSL: l'indirizzo del sito inizia con https:// L'icona viene visualizzata nel blocco del browser i dati vengono trasmessi in forma crittografata Senza SSL, il sito funziona tramite http:// e la connessione è considerata non sicura. Perché HTTPS è importante per il SEO I motori di ricerca considerano la sicurezza del sito durante il posizionamento. Pertanto, HTTPS influisce direttamente sulla promozione. 1. Fattore di
La velocità di caricamento del sito è uno dei fattori chiave di ranking su Google. Se le pagine si aprono lentamente, perdi non solo posizioni di ricerca, ma anche clienti reali. Scopriamo come funziona e cosa farne. Perché la velocità è importante per il SEO I motori di ricerca, incluso Google, tengono conto dell'esperienza dell'utente. Sito lento: aumenta la frequenza di rimbalzo riduce il tempo sul sito peggiora conversioni influisce sul ranking di ricerca Ciò è particolarmente importante dopo l'implementazione di Core Web Vitals: metriche sulla qualità dei download. Metriche di velocità chiave 1. LCP (Largest Contentful Paint) Il tempo di caricamento del contenuto principale della pagina. 📌Norma: fino a 2,5 secondi 2. FID (First Input Delay) Ritardo prima della prima interazione dell'utente. 📌 Normale: fino a 100 ms 3. CLS (Cumulative Layout Shift) Quanto “salta” l'interfaccia durante il caricamento. 📌 Norma: inferiore a 0,1 Puoi controllare questi
L'audit tecnico di un sito web è la base di un'efficace promozione SEO. Anche il sito web più bello e vendibile non porterà clienti se presenta errori tecnici. Test regolari aiutano a identificare i problemi e a migliorare il posizionamento nei motori di ricerca. 1. Velocità di caricamento del sito web Il caricamento veloce è uno dei fattori chiave di ranking. Se il caricamento di un sito richiede più di 2-3 secondi, gli utenti se ne vanno e il posizionamento diminuisce. È importante ottimizzare le immagini, il codice e il server. 2. Adattamento per dispositivi mobili La maggior parte degli utenti accede dal proprio telefono. Il sito deve essere visualizzato correttamente su tutti i dispositivi e funzionare rapidamente sui dispositivi mobili. 3. Indicizzazione delle pagine Verifica che tutte le pagine importanti siano indicizzate dai motori di ricerca. Errori nel file robots.txt o nei meta tag possono impedire il rilevamento del tuo sito da parte di Google. 4. Errori e