Hai capito dove si scaricano ma c’è un dubbio da valutare: come leggere i log del web server? Queste informazioni – particolarmente tecniche – sono fondamentali per capire cosa fanno e come si comportano i bot sul sito, per monitorare il comportamento dei motori di ricerca in termini di crawl budget.
Se vuoi fare un’analisi SEO tecnica e un lavoro di diagnostica non puoi ignorare l’importanza di questa fonte di dati che viene generata lato web server. Ma c’è un punto da sottolineare: non puoi affrontare questi dati senza un programma adeguato. Quindi, vuoi sapere come leggere i log del web server? Ecco i software utili.
Proprio così, per aprire e studiare i log del tuo server basta un normalissimo software per gestire le caselle. Quindi con il foglio di calcolo hai la possibilità di studiare tutto quello che succede sul tuo sito web, ma la domanda sorge spontanea: come aprire il file log con Excel?
Basta scaricare il documento (ecco dove si trovano i log sul server) sul desktop e cliccare sopra con il tasto destro. Vai su Apri con e scegli l’applicazione che usi di solito per i fogli di calcolo. Definisci al meglio la larghezza delle colonne e inizia la tua analisi manuale.
Non è il massimo, vero, ma analizzare i log con Excel ha il suo fascino. E, soprattutto, resta uno strumento universale, sempre disponibile.
Sappiamo che i log del server sono una fonte preziosa di informazioni per monitorare l’attività del tuo sito web, trovare problemi tecnici e analizzare il comportamento dei visitatori. Su cPanel, il pannello di controllo che trovi anche su tutti i nostri hosting condivisi Linux, accedere a questi dati è piuttosto semplice. Come funziona?
Dopo aver effettuato il login vai nella sezione Metriche. Qui sono disponibili diverse voci. I Raw Access Logs contengono tutte le richieste HTTP ricevute dal server in formato testuale grezzo, inclusi indirizzi IP dei visitatori, timestamp, pagine richieste, user agent utilizzato dai browser e i famosi codici di stato HTTP.
Questi file possono essere scaricati per analisi più approfondite con strumenti esterni. Error Logs raccolgono gli errori generati dal server web, come pagine non trovate, errori di script PHP, problemi di permessi sui file. Sono fondamentali per il debugging e per individuare subito cosa non funziona sul tuo sito.
Il tool Awstats genera automaticamente report grafici su visite, pagine più popolari, provenienza geografica del traffico e statistiche sulla banda utilizzata. Se hai bisogno di mantenere uno storico più lungo, dovrai scaricare regolarmente i file dei log e archiviarli localmente o su un sistema di storage esterno.
Di sicuro questo è uno dei software più famosi per leggere e analizzare i log del server di un sito. Si tratta di un programma open source gratuito capace di estrapolare i dati e visualizzarli in tempo reale.
Questo web log analyzer analizza il comportamento di utenti e bot e lo fa senza grandi configurazioni. La sua caratteristica: analizza e visualizza le statistiche del web server in tempo reale senza il browser, da terminale.
Con un output facile da decifrare tutto diventa diretto, immediato. Puoi organizzare i dati come preferisci, esportare in HTML e CSV quasi tutti i formati di log tipo Apache, NGINX, Amazon S3 e altri ancora. Puoi trovare la live demo online e tutte le informazioni sul sito web ufficiale https://goaccess.io.
Da approfondire: eliminare una pagina da Google
Strumento per l’analisi dei log di qualsiasi provenienza. Questo tool a pagamento, con versione trial gratuita, è pensato per verificare infrastrutture dinamiche come Amazon AWS, Microsoft Azure e soluzioni cloud.
Insomma, è un tool di analisi dei log server professionale. Ed è sicuramente pensato per chi va oltre il classico sito web su hosting condiviso. Per approfondire visita il portale ufficiale: www.loggly.com.
Con questo tool puoi filtrare, cercare e analizzare i file di log su server Apache e NGINX. Lo studio del report si semplifica – e non di poco – grazie alla possibilità di evidenziare le richieste HTTP in base allo status code.
Così è facile capire cosa impatta su client error (4xx) o redirect. In modo da prendere decisioni chiare e risolvere problemi concreti. Per completare il tutto puoi consultare ed estrapolare statistiche con gli errori, la larghezza di banda e altro ancora. Il sito web offre tutte le informazioni per scegliere questo tool: apacheviewer.com.
Un approccio SEO oriented per l’analisi dei dati che arrivano dalla macchina che sostiene il tuo sito. Come leggere i log del web server? Puoi usare la piattaforma Semrush che tra le diverse soluzioni per l’ottimizzazione del sito web e l’analisi delle keyword offre un tool per studiare il comportamento di user e bot.
Per ottenere i risultati basta fare upload del documento nel log file analyzer: le schermate ti consentono di cogliere diversi risultati. Ad esempio quali errori sono stati registrati nel corso dell’analisi, le pagine sottoposte a scansioni frequenti (così puoi capire se il crawler si concentra su quelle giuste) e se impieghi il tuo budget nel modo giusto. Per maggiori informazioni puoi visitare la pagina ufficiale semrush.com/log-file-analyzer.
Sulla scia di un’analisi SEO per ottimizzare il crawl budget puoi utilizzare Screaming Frog che consente di studiare il comportamento dei bot. Questo Log File Analyzer ha una panoramica dei dati per ottimizzare il tuo progetto. Il processo inizia con una semplicità estrema dato che puoi inserire più file contemporaneamente.
Il tool consente di lavorare con documenti di grandi dimensioni e prodotti da qualsiasi server (tipo Apache, ISS o NGINX). C’è una prova gratuita ma la versione a pagamento è quella che dà maggiori risultati
Soprattutto se devi fare un’analisi SEO professionale. Hai tutti i tool necessari per raggruppare gruppi di risultati così puoi risolvere errori di status code e identificare pagine di grandi dimensioni e senza collegamenti, con link interni rotti o problemi di prestazioni. Maggiori informazioni: screamingfrog.co.uk/log-file-analyser.
Le statistiche di scansione o Crawl Stats in Google Search Console offrono una visione dettagliata di come Googlebot interagisce con il tuo sito web durante il processo di indicizzazione. Sono dati che mostrano il comportamento del crawler di Google dal suo punto di vista, non quello del tuo server.
Quindi, perché inseriamo questo tool nella lista degli strumenti per analizzare i log del server? Semplice, per avere un parametro di confronto e non fermarci a ciò che vediamo sulla nostra macchina. Per accedere a queste informazioni, devi entrare in Search Console, selezionare la proprietà del tuo sito e cercare la sezione Impostazioni nel menu laterale. Qui trovi la voce Statistiche di scansione che ti porta a una dashboard.
Le informazioni includono il numero totale di richieste di scansione, mostrando se il bot sta visitando il tuo sito più o meno frequentemente. Questo è importante perché un calo potrebbe indicare problemi tecnici o penalizzazioni, mentre un aumento può significare che Google sta rivalutando il tuo sito positivamente.
I tempi di risposta del server misurano quanto velocemente il tuo hosting risponde alle richieste di Googlebot. Valori elevati possono suggerire problemi di performance che potrebbero influenzare negativamente il posizionamento, dato che la velocità del sito è un fattore di ranking come sappiamo da tempo.
Le statistiche mostrano le risposte HTTP, suddividendo le richieste per codici di stato: quante pagine hanno risposto correttamente (200), quante hanno generato redirect (301, 302), errori client (404) o errori server (500, 503). Un’alta percentuale di errori è un segnale d’allarme che richiede intervento immediato.
A differenza dei log del server che registrano ogni singola visita al tuo sito (inclusi utenti reali, bot malevoli, altri crawler), le statistiche di scansione di Search Console si concentrano sull’attività di Googlebot. Per un’analisi SEO si confrontano questi dati con i log del server per identificare discrepanze, pagine che Googlebot ignora o pattern di scansione che potrebbero essere ottimizzati tramite il file robots.txt o le sitemap XML.
Uno strumento gratuito, sicuramente un po’ datato e dalla grafica vintage ma comunque potente e ricco di funzionalità. Awstats genera anche statistiche in forma grafica e mostra gli approfondimenti che si trovano nel file log. Trovi tutte le informazioni su Sourceforge. Qui invece hai una schermata del tool in esame.
Come anticipato, questo tool viene utilizzato in molte distribuzioni cPanel (come avviene anche per Serverplan). Conosci altri strumenti da aggiungere alla lista? Quali sono i migliori software? Come leggere i log del web server in base alla tua esperienza personale? Lascia la tua competenza qui.
