Cos’\u00e8 il File Robots.txt<\/h3>\n
Il file robots.txt<\/strong> \u00e8 un file di testo posizionato nella directory root del tuo sito web che fornisce istruzioni ai crawler dei motori di ricerca su quali aree del sito possono o non possono scansionare. \u00c8 il primo file che i crawler visitano quando accedono a un sito e le sue direttive vengono generalmente rispettate da tutti i motori di ricerca principali, inclusi Google, Bing e Yahoo.<\/p>\n \u00c8 fondamentale comprendere che il robots.txt non \u00e8 uno strumento di sicurezza<\/strong>. Le direttive Disallow impediscono ai crawler di scansionare determinate pagine, ma non le rendono invisibili. Se altre pagine linkano a una URL bloccata dal robots.txt, Google potrebbe comunque indicizzarla mostrando solo l’URL senza snippet. Per impedire completamente l’indicizzazione di una pagina, devi utilizzare il meta tag WordPress genera automaticamente un robots.txt virtuale che contiene le direttive di base. Questo file virtuale permette la scansione della maggior parte del sito ma blocca l’accesso alla directory Con AIOSEO puoi sostituire il robots.txt virtuale con un file personalizzato<\/strong> che offre un controllo molto pi\u00f9 granulare. Questo ti permette di bloccare directory specifiche, consentire l’accesso a risorse necessarie per il rendering e aggiungere riferimenti alla sitemap.<\/p>\n Per modificare il robots.txt tramite AIOSEO, vai su AIOSEO > Strumenti > Robots.txt Editor<\/strong>. Qui troverai un editor visuale che ti permette di aggiungere, modificare ed eliminare le regole del robots.txt senza dover modificare manualmente il file. L’interfaccia mostra le regole in un formato tabellare con colonne per User-Agent, Direttiva (Allow\/Disallow) e Percorso.<\/p>\n Per aggiungere una nuova regola, clicca su Aggiungi regola<\/strong> e compila i tre campi. Lo User-Agent<\/strong> specifica a quale crawler si applica la regola (* per tutti i crawler, Googlebot per solo Google, Bingbot per solo Bing). La Direttiva<\/strong> pu\u00f2 essere Allow (permetti) o Disallow (blocca). Il Percorso<\/strong> \u00e8 la directory o il pattern URL da bloccare o consentire.<\/p>\n Ecco una configurazione robots.txt ottimale per la maggior parte dei siti WordPress. Queste regole rappresentano le best practice consolidate della SEO tecnica:<\/p>\n Bloccare \/wp-admin\/<\/strong>: la directory di amministrazione non deve essere scansionata dai crawler. Tuttavia, \u00e8 importante permettere l’accesso a \/wp-admin\/admin-ajax.php<\/strong>, che \u00e8 necessario per il corretto funzionamento di molti plugin e temi che utilizzano AJAX per caricare contenuti.<\/p>\n Bloccare \/wp-includes\/<\/strong>: questa directory contiene file di sistema di WordPress che non hanno valore SEO. Tuttavia, alcune risorse CSS e JavaScript necessarie per il rendering delle pagine risiedono qui, quindi valuta caso per caso se bloccarla completamente.<\/p>\n Bloccare i parametri di ricerca<\/strong>: le pagine di ricerca interna ( Bloccare le pagine di login e registrazione<\/strong>: le URL Includere il riferimento alla Sitemap<\/strong>: aggiungi in fondo al robots.txt la riga Il file .htaccess<\/strong> (Hypertext Access) \u00e8 un file di configurazione del server web Apache che controlla il comportamento del server per la directory in cui si trova e per tutte le sottodirectory. Su WordPress, il file .htaccess viene utilizzato principalmente per gestire i permalink<\/strong> (URL permanenti), ma pu\u00f2 essere configurato per implementare redirect, regole di sicurezza, compressione, caching e molto altro.<\/p>\n A differenza del robots.txt, che \u00e8 un semplice file di testo con direttive per i crawler, il .htaccess \u00e8 un file di configurazione del server con una sintassi specifica. Errori nella configurazione del .htaccess possono causare errori 500 del server<\/strong>, rendendo il sito completamente inaccessibile. Per questo motivo, \u00e8 fondamentale procedere con cautela e fare sempre un backup prima di qualsiasi modifica.<\/p>\n AIOSEO include un editor integrato per il file .htaccess accessibile da AIOSEO > Strumenti > .htaccess Editor<\/strong>. Questo editor mostra il contenuto attuale del file e ti permette di modificarlo direttamente dalla dashboard di WordPress, senza dover accedere al server tramite FTP.<\/p>\n L’editor di AIOSEO crea automaticamente un backup<\/strong> del file .htaccess prima di ogni modifica, permettendoti di ripristinare la versione precedente in caso di problemi. Questa funzionalit\u00e0 di sicurezza \u00e8 fondamentale perch\u00e9 un errore nel .htaccess pu\u00f2 rendere il sito inaccessibile, impedendoti di accedere alla dashboard per correggere l’errore.<\/p>\n Ci sono diverse configurazioni .htaccess che possono migliorare la SEO e le prestazioni del tuo sito. Ecco le pi\u00f9 importanti:<\/p>\n Redirect da www a non-www<\/strong> (o viceversa): \u00e8 fondamentale che il tuo sito sia accessibile da una sola versione dell’URL. Se il sito \u00e8 raggiungibile sia da Forzare HTTPS<\/strong>: se il tuo sito ha un certificato SSL, assicurati che tutte le richieste HTTP vengano reindirizzate a HTTPS. Questo \u00e8 un fattore di ranking confermato da Google e migliora la sicurezza del sito. La regola .htaccess per forzare HTTPS utilizza il modulo Compressione GZIP<\/strong>: abilitare la compressione GZIP riduce significativamente la dimensione dei file trasferiti dal server al browser, migliorando la velocit\u00e0 di caricamento. Puoi abilitarla aggiungendo le direttive Browser caching<\/strong>: configurare gli header di cache permette ai browser di memorizzare localmente le risorse statiche (immagini, CSS, JavaScript), riducendo i tempi di caricamento per le visite successive. Le direttive I redirect 301<\/strong> (redirect permanenti) sono fondamentali quando cambi la struttura degli URL del tuo sito, elimini pagine o migri da un altro dominio. Un redirect 301 comunica ai motori di ricerca che la pagina si \u00e8 spostata definitivamente a un nuovo URL, trasferendo la maggior parte dell’autorit\u00e0 SEO alla nuova destinazione.<\/p>\n Sebbene AIOSEO Pro offra un Redirect Manager<\/strong> dedicato (che vedremo in un articolo separato), \u00e8 utile sapere che i redirect possono essere implementati anche direttamente nel .htaccess. La sintassi base \u00e8 Il file .htaccess pu\u00f2 essere utilizzato per bloccare bot malevoli<\/strong>, scraper e crawler di spam che consumano risorse del server e possono compromettere le prestazioni del sito. Puoi bloccare specifici User-Agent, indirizzi IP o intervalli di IP che generano traffico indesiderato.<\/p>\n Tuttavia, \u00e8 importante procedere con cautela per non bloccare accidentalmente crawler legittimi o utenti reali. Prima di aggiungere regole di blocco, verifica nei log del server quali User-Agent o IP stanno generando traffico anomalo e assicurati che non si tratti di crawler dei motori di ricerca o di servizi legittimi.<\/p>\n Il file L’errore pi\u00f9 comune nella configurazione del robots.txt \u00e8 bloccare accidentalmente risorse necessarie<\/strong> per il rendering delle pagine. Se blocchi file CSS o JavaScript nel robots.txt, Google non sar\u00e0 in grado di renderizzare correttamente le tue pagine e potrebbe penalizzare il posizionamento. Utilizza lo strumento "Ispezione URL" di Google Search Console per verificare che Google riesca a visualizzare correttamente le tue pagine.<\/p>\n Per quanto riguarda il .htaccess, l’errore pi\u00f9 frequente \u00e8 un errore di sintassi<\/strong> che causa un errore 500 Internal Server Error. Se dopo una modifica al .htaccess il sito diventa inaccessibile, collegati al server tramite FTP, rinomina o elimina il file .htaccess e il sito torner\u00e0 online. Poi ricrea il file con le regole corrette, testando una modifica alla volta.<\/p>\n Un altro errore comune \u00e8 creare loop di redirect<\/strong> nel .htaccess, dove una regola reindirizza a un URL che viene a sua volta reindirizzato dalla stessa o da un’altra regola, creando un ciclo infinito. I browser mostrano l’errore "Too many redirects" in questo caso. Per evitare i loop, utilizza sempre le condizioni RewriteCond per limitare l’applicazione delle regole.<\/p>\n Prima di applicare modifiche al robots.txt o al .htaccess di un sito in produzione, \u00e8 consigliabile testare le modifiche<\/strong> in un ambiente di staging. Se non hai un ambiente di staging, testa le modifiche una alla volta, verificando dopo ogni modifica che il sito funzioni correttamente e che le pagine siano raggiungibili.<\/p>\n Per il robots.txt, puoi utilizzare lo strumento Robots Testing Tool<\/strong> di Google Search Console per verificare che le tue regole funzionino come previsto. Inserisci un URL e lo strumento ti dir\u00e0 se quel URL \u00e8 bloccato o consentito dalle regole del tuo robots.txt.<\/p>\n Per il robots.txt, mantieni le regole semplici e chiare. Non bloccare risorse necessarie per il rendering. Includi sempre il riferimento alla sitemap. Per il .htaccess, fai sempre un backup prima di ogni modifica. Testa le modifiche una alla volta. Non duplicare funzionalit\u00e0 gi\u00e0 gestite da plugin. Utilizza commenti per documentare ogni regola aggiunta. Seguendo queste raccomandazioni, potrai configurare il robots.txt e il .htaccess in modo ottimale per la SEO del tuo sito.<\/p>\n Approfondisci la SEO del tuo sito con le nostre guide su Rank Math<\/a>, Broken Link Checker<\/a> e SEO per WooCommerce<\/a>.<\/p>\n La corretta configurazione del robots.txt e del .htaccess \u00e8 un aspetto avanzato ma cruciale della SEO tecnica. All in One SEO semplifica la gestione di entrambi i file con editor integrati, backup automatici e un’interfaccia intuitiva. Se hai bisogno di supporto per la configurazione tecnica del tuo sito WordPress, contatta il nostro team<\/a> oppure scopri i nostri servizi di posizionamento SEO<\/a>.<\/p>\n Scopri le nostre altre guide dedicate ai migliori plugin e strumenti per WordPress:<\/p>\n Robots.txt e .htaccess con All in One SEO: Configurazione Avanzata I file robots.txt e .htaccess sono due elementi fondamentali della SEO tecnica che controllano rispettivamente…<\/p>\n","protected":false},"author":0,"featured_media":166923,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"_seopress_robots_primary_cat":"","_seopress_titles_title":"AIOSEO Robots.txt e htaccess: Configurazione | Guida","_seopress_titles_desc":"Come configurare robots.txt e .htaccess con AIOSEO. Direttive crawl, blocco risorse, redirect, sicurezza e ottimizzazione server.","_seopress_robots_index":"","footnotes":""},"categories":[1],"tags":[3396,2885,3350,3349,2514],"class_list":["post-166993","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-senza-categoria","tag-aioseo","tag-configurazione","tag-htaccess","tag-robots-txt","tag-seo-tecnica"],"_links":{"self":[{"href":"https:\/\/gtechgroup.it\/blog\/wp-json\/wp\/v2\/posts\/166993","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/gtechgroup.it\/blog\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/gtechgroup.it\/blog\/wp-json\/wp\/v2\/types\/post"}],"replies":[{"embeddable":true,"href":"https:\/\/gtechgroup.it\/blog\/wp-json\/wp\/v2\/comments?post=166993"}],"version-history":[{"count":0,"href":"https:\/\/gtechgroup.it\/blog\/wp-json\/wp\/v2\/posts\/166993\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/gtechgroup.it\/blog\/wp-json\/wp\/v2\/media\/166923"}],"wp:attachment":[{"href":"https:\/\/gtechgroup.it\/blog\/wp-json\/wp\/v2\/media?parent=166993"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/gtechgroup.it\/blog\/wp-json\/wp\/v2\/categories?post=166993"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/gtechgroup.it\/blog\/wp-json\/wp\/v2\/tags?post=166993"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}noindex<\/code>, configurabile tramite le impostazioni AIOSEO di ogni singolo contenuto.<\/p>\nIl Robots.txt Predefinito di WordPress<\/h3>\n
\/wp-admin\/<\/code>. Tuttavia, il robots.txt virtuale di WordPress \u00e8 piuttosto basilare e non offre il livello di controllo necessario per un’ottimizzazione SEO professionale.<\/p>\n![\"Editor](\"https:\/\/gtechgroup.it\/blog\/wp-content\/uploads\/2026\/05\/aio-04-settings.png\")
<\/p>\nConfigurare il Robots.txt con AIOSEO<\/h3>\n
Regole Consigliate per il Robots.txt<\/h3>\n
\/?s=<\/code>) generano contenuti dinamici che possono creare problemi di contenuto duplicato. Bloccale con la regola Disallow: \/?s=<\/code>.<\/p>\n\/wp-login.php<\/code> e \/wp-register.php<\/code> non devono essere indicizzate. Bloccale nel robots.txt e imposta anche il noindex tramite AIOSEO.<\/p>\nSitemap: https:\/\/tuosito.it\/sitemap.xml<\/code> per indicare ai crawler la posizione della tua sitemap XML. AIOSEO aggiunge automaticamente questo riferimento se la sitemap \u00e8 attiva.<\/p>\nCos’\u00e8 il File .htaccess<\/h3>\n
L’Editor .htaccess di AIOSEO<\/h3>\n
![\"Strumenti](\"https:\/\/gtechgroup.it\/blog\/wp-content\/uploads\/2026\/05\/aio-03-sitemap.png\")
<\/p>\nConfigurazioni .htaccess Utili per la SEO<\/h3>\n
www.tuosito.it<\/code> sia da tuosito.it<\/code>, i motori di ricerca potrebbero interpretarle come due siti distinti, diluendo l’autorit\u00e0. Configura un redirect 301 dalla versione non preferita a quella preferita.<\/p>\nmod_rewrite<\/code> per intercettare le richieste HTTP e reindirizzarle alla versione sicura.<\/p>\nmod_deflate<\/code> nel .htaccess. Nota: se utilizzi un plugin di caching come WP Rocket, questa configurazione potrebbe essere gi\u00e0 gestita dal plugin.<\/p>\nmod_expires<\/code> nel .htaccess definiscono per quanto tempo ogni tipo di risorsa deve essere memorizzata nella cache del browser.<\/p>\nRedirect 301 tramite .htaccess<\/h3>\n
![\"Screenshot](\"https:\/\/gtechgroup.it\/blog\/wp-content\/uploads\/2026\/05\/aio-01-dashboard.png\")
<\/p>\nRedirect 301 \/vecchio-percorso https:\/\/tuosito.it\/nuovo-percorso<\/code>. Per redirect pi\u00f9 complessi con pattern e variabili, si utilizzano le regole RewriteRule del modulo mod_rewrite.<\/p>\nBloccare Bot Malevoli e Spam<\/h3>\n
Proteggere il File wp-config.php<\/h3>\n
wp-config.php<\/code> contiene le credenziali del database e altre informazioni sensibili del tuo sito WordPress. Sebbene il server web non serva normalmente i file PHP come testo, \u00e8 una buona pratica aggiungere una regola .htaccess che blocca esplicitamente l’accesso<\/strong> a questo file. AIOSEO non gestisce direttamente questa configurazione, ma puoi aggiungerla tramite l’editor .htaccess del plugin.<\/p>\nErrori Comuni e Soluzioni<\/h3>\n
Testare le Modifiche<\/h3>\n
Best Practice e Raccomandazioni<\/h3>\n
Conclusioni<\/h3>\n
Migliora il Tuo Sito WordPress<\/h3>\n
\n