Technische SEO

Serverlogs — crawleractiviteit analyseren

Serverlogboeken zijn records van afgehandelde verzoeken en technische gebeurtenissen. Het toegangslogboek kan tijd, bronadres, HTTP-status, clientidentificatie en responstijd bevatten, afhankelijk van de configuratie.

Gepubliceerd: Bijgewerkt: 3 min leestijd
Diagram: Serverlogboeken - analyse van robotverkeer. Registratie - Verificatie - Analyse.

Wat zijn serverlogboeken?

Serverlogboeken zijn records van afgehandelde verzoeken en technische gebeurtenissen. Het toegangslogboek kan tijd, bronadres, HTTP-status, clientidentificatie en responstijd bevatten, afhankelijk van de configuratie. Bij SEO helpt het om te zien welke adressen daadwerkelijk zijn gedownload, ook door robots. Het is niet hetzelfde als browseranalyse: een bestandsverzoek betekent niet een volledig menselijk bezoek, en het ontbreken van een analysescript verwijdert de invoer niet uit het serverlogboek.

Reikwijdte en volledigheid van gegevens

Bepaal of u de log van een applicatie, webserver of CDN-laag analyseert. De cache kan sommige verzoeken verwerken zonder de bronserver te bereiken. Controleer tijdzone, retentie, bestandsrotatie en meetvelden. Zonder dit kan het gebrek aan vermeldingen ten onrechte als inactiviteit worden beschouwd. Beveilig bestanden en beperk de toegang omdat ze IP-adressen, queryparameters en gegevens kunnen bevatten die niet openbaar beschikbaar mogen zijn.

Hoe herken je een robot?

De naam Googlebot in een User-Agent-header is geen betrouwbaar identiteitsbewijs: een client kan die waarde willekeurig instellen. Gebruik de actueel gedocumenteerde verificatiemethoden, zoals controle van gepubliceerde IP-bereiken of de voorgeschreven DNS-controles. Houd rekening met het type crawler en het doel van het verzoek. Maak onderscheid tussen geautomatiseerde clients wanneer u downloads van een bepaalde zoekmachine beoordeelt en daar SEO-conclusies aan verbindt.

Vragen die nuttig zijn bij de audit

Controleer het verzoekaandeel op belangrijke inhoud, filters, omleidingen en fouten. Identificeer lussen, ketens en 5xx- of 429-reactiepieken. Vergelijk wanneer het materiaal wordt bijgewerkt met de volgende download. Hoge activiteit op parameters kan overmatige URL-ruimte aan het licht brengen. Beschouw alleen al het aantal robotbezoeken niet als een succes: het gaat erom of hij de juiste bronnen bezoekt en stabiele reacties krijgt, niet of de verzoekenteller blijft stijgen.

Logboeken en indexering

Een downloadbevestiging bewijst niet dat de pagina is geïndexeerd of een hoge ranking heeft. Eenmaal gedownload kan de zoekmachine duplicatie, canoniek, kwaliteit en bruikbaarheid evalueren. Combineer logboeken met adrescontrole en Search Console-rapportage. Vergelijk tijdens het migreren oude en nieuwe adressen om onjuiste omleidingen te detecteren. Conclusies moeten het feit van de technische extractie scheiden van de hypothese waarom het materiaal wel of niet in de resultaten werd gepresenteerd.

Veilige rapportage

Verzamel gegevens voor analyse en verwijder onnodige persoonlijke informatie uit gedeelde rapporten. Upload geen onbewerkte logboeken naar een externe tool zonder de omvang van de gegevens en machtigingen te beoordelen. Leg de filtermethode, periode en inzamelbeperkingen vast. Met een herhaalbaar rapport kunt u het effect controleren van het wijzigen van regels of het repareren van de server. Betrouwbare loganalyse levert bewijs van de werking van de infrastructuur, maar vervangt geen audit van inhoud en gebruikerservaring.

Hoe kun je het databereik niet verwarren?

Als de CDN een afbeelding uit zijn geheugen aanbiedt, slaat de bronserver het verzoek mogelijk niet op. Als u alleen het logbestand analyseert, wordt niet het gehele verkeer weergegeven. Controleer infrastructuurlagen, tijdzones en bestandsrotatie. De naam van de robot in User-Agent vereist verificatie volgens de documentatie omdat deze kan worden vervalst. Het rapport moet duidelijk beschrijven hoe de echte verzoeken van de onderzochte zoekmachine zijn geïdentificeerd.

Deel geen onbewerkte logbestanden als openbare auditbijlage. IP-adressen, parameters en identificatiegegevens vereisen mogelijk bescherming. Verzamel gegevens indien nodig, beheer toegang en opslagtijd. Het downloaden van een geldige URL is een bewijs van toegang, maar geen indexering of positionering. Combineer observatie met controle over inhoud en signalen, in plaats van conclusies te trekken over de hele SEO op basis van één grafiek van robotactiviteit.

Bronnen en verder lezen

Met de oorspronkelijke documentatie kunt u de beschreven principes en beperkingen controleren.

Hoe stellen we de woordenlijst samen?

Deze artikelen combineren eigen redactioneel werk, AI-ondersteuning bij redactie en vertaling en controle aan de hand van de gekoppelde oorspronkelijke documentatie. Voorbeelden zijn ter toelichting, tenzij anders vermeld; ze vertegenwoordigen geen klantresultaten. De datums verwijzen naar publicatie en daadwerkelijke inhoudelijke wijzigingen.

Van kennis naar actie

Hulp nodig bij de uitvoering?

Vertel ons over uw website of proces. Samen bepalen we de omvang en de volgende praktische stap.

Bespreek uw project