imbahub
Meny +
SV
Prata med oss
IMBAHUB / Kunskap & guider

Verifiera avsändaren och urvalet innan ni räknar robotbesök.

En loggrad som kallar sig Googlebot eller Bingbot är inte ett färdigt identitetsbevis. Ett urval visar inte heller automatiskt alla hämtningar. Den här guiden hjälper teamet att klassificera avsändare och ange vad loggmaterialet faktiskt täcker.

Tre grupper i stället för ett antaget botantal
  1. Verifierad

    Rätt metod ger stöd för angiven avsändarklass.

  2. Inte verifierad

    Namnet saknar tillräckligt verifieringsstöd.

  3. Okänd

    Nödvändigt fält eller uppslagsunderlag saknas.

Okänt ska inte räknas som säkert äkta eller säkert falskt.

Exporten har user-agent men ingen betrodd klient-IP. Kan alla Googlebot-rader räknas som verifierade?

Nej. Redovisa dem som självdeklarerade och ange vilket underlag som krävs för verifiering.

Kontrollera vilket adressfält ni kan lita på

Dokumentera om loggen skapas i CDN, lastbalanserare eller origin och hur klientadress förs vidare. Proxyadressen kan vara en mellanhand. En klientstyrd header får inte okritiskt bli verifieringens avsändaradress.

Behåll bara de uppgifter som behövs i det avtalade arbetsunderlaget och skydda det begränsade råurvalet. Om en export saknar tillförlitlig klientadress kan user-agent summeras som påstående, men inte uppgraderas till verifierad identitet.

Använd aktuell metod för rätt robotkategori

Följ leverantörens aktuella verifieringsanvisning, exempelvis kontrollerad DNS-metod eller publicerade aktuella nätintervall för rätt kategori. Vid DNS-verifiering räcker inte ett lovande namn från omvänt uppslag; det framåtriktade uppslaget behöver också stämma med ursprungsadressen.

Spara metod, kontrolltid och utfall. Gamla frysta listor är inte en beständig sanning. Skilj vanliga sökrobotar från särskilda eller användarutlösta hämtare där leverantören gör den indelningen. Okänt resultat får vara okänt.

UnderlagRimlig klassningNästa fråga
Endast user-agentSjälvdeklarerat robotnamnFinns tillförlitlig klientadress?
Full verifiering enligt aktuell metodVerifierad avsändarkategoriVilken robottyp och kontrolltid?
Misslyckat tekniskt uppslagOkänd eller ej verifieradVar metoden och uppslaget tillgängliga?
Bara originloggObservation i ett leveranslagerVilka cachesvar syns inte?
Ofullständig tidsperiodBegränsat urvalVilka intervall saknas?

Beskriv loggtäckningen före procenttal

Ange period, tidszon, värd, logglager och eventuellt samplingförfarande. Kontrollera om misslyckade svar, olika metoder och cacheträffar ingår. Blanda inte två exportfiler så att samma begäran räknas två gånger utan att känna till relationen.

Räkna anrop i det observerade urvalet och namnge nämnaren. En ökad andel fel kan bero på ändrad export eller trafikgrupp. Avsaknad av en URL i en liten originexport visar bara att den inte syns där, inte att ingen robot någonsin hämtat den.

Gör fyndet möjligt att kontrollera igen

Välj ett avgränsat mönster, exempelvis felstatus för en viss språkgrupp, och spara aggregerade belägg samt ett skyddat prov för ansvarig tekniker. Ange alternativa förklaringar och vilken ytterligare kontroll som skiljer dem åt.

Efter en godkänd teknisk ändring jämförs ett relevant nytt urval med samma definitioner. En verifierad lyckad hämtning är inte ett indexeringsbevis. Behöriga sökverktyg och faktiskt synligt innehåll behöver egna kontroller; loggarna ska inte användas för löften om ranking eller AI-svar.

Källor och fördjupning

Bra att veta

Är ett botnamn i user-agent säkert?

Nej. Avsändaren kan ange strängen själv. Verifiering behöver tillförlitlig adress och aktuell leverantörsmetod.

Ska ett misslyckat DNS-uppslag kallas falsk bot?

Inte utan vidare. Dokumentera osäkerheten och kontrollera metod och tekniska förutsättningar.

IMBAHUB

Vad vill du göra möjligt?

Skriv logglager, tidsluckor och verifieringsmetod överst i nästa crawlrapport.

Prata med oss
Autentiskt produktgränssnitt på svenska. Separat presentationsmiljö med fiktiva demodata.

Autentiskt produktgränssnitt på svenska. Separat presentationsmiljö med fiktiva demodata.