DotBot
Zuletzt aktualisiert vor 1 Stunde.
Was ist DotBot?
Über
Moz's SEO crawler
Moz
Sehen Sie, wie oft DotBot Ihre Website besucht, indem Sie Spyglasses Analytics einrichten. Tracking einrichten
Haben Sie Mozilla/5.0 (compatible; DotBot/1.1; http://www.opensiteexplorer.org/dotbot, help@moz.com) in Ihren Logs gefunden?
Wenn Sie Mozilla/5.0 (compatible; DotBot/1.1; http://www.opensiteexplorer.org/dotbot, help@moz.com) in Ihren Website-Logs gesehen haben, zeigt das, dass DotBot Ihre Website besucht hat. Diese Agent-Zeichenkette ist einer der bekannten Identifikatoren für diesen Bot.
Verfolgen und verwalten Sie DotBot-Besuche auf Ihrer Website mit Spyglasses' Echtzeit-Bot-Erkennung. Tracking starten
Haben Sie dotbot in Ihren Logs gefunden?
Wenn Sie dotbot in Ihren Website-Logs gesehen haben, zeigt das, dass DotBot Ihre Website besucht hat. Diese Agent-Zeichenkette ist einer der bekannten Identifikatoren für diesen Bot.
Verfolgen und verwalten Sie DotBot-Besuche auf Ihrer Website mit Spyglasses' Echtzeit-Bot-Erkennung. Tracking starten
Erwartetes Verhalten
Web-Crawler besuchen Websites nach einem regelmäßigen Zeitplan, um Inhalte für Suchmaschinen oder andere Dienste zu indexieren. Sie folgen typischerweise einem konsistenten Crawling-Muster und respektieren robots.txt-Direktiven.
Sollte ich DotBot blockieren?
Dieser Bot ist als konform markiert, was bedeutet, dass er im Allgemeinen robots.txt-Direktiven respektiert und gute Praktiken befolgt. Sie können wählen, ihn zu erlauben, wenn Sie möchten, dass Ihre Inhalte für seine Dienste zugänglich sind.
Empfohlene Lösung
Anstatt robots.txt-Regeln manuell zu verwalten, verwenden Sie Spyglasses, um DotBot-Traffic automatisch mit Echtzeit-Analytics und flexiblen Blockierungsregeln zu erkennen und zu verwalten.
Automatisches Bot-Management erhaltenWie blockiere ich DotBot?
Sie können diesen Bot blockieren oder seinen Zugang beschränken, indem Sie User-Agent-Token-Regeln in der robots.txt-Datei Ihrer Website festlegen. Verwenden Sie Spyglasses Analytics, um zu überprüfen, ob er Ihre Regeln tatsächlich befolgt.
User-Agent-Token
dotbotSollte Instanzen dieses Bots erkennenrobots.txt
# robots.txt # This should block DotBot User-agent: dotbot Disallow: /
Anstatt dies manuell zu tun, verwenden Sie Spyglasses, um Ihre Regeln automatisch mit den neuesten KI-Agenten und Crawlern auf dem aktuellen Stand zu halten. Automatisches Bot-Management einrichten
DotBot-Traffic mit Spyglasses verwalten
Erhalten Sie Echtzeit-Benachrichtigungen, wenn Bots Ihre Website besuchen, generieren Sie automatisch robots.txt-Regeln und integrieren Sie Bot-Traffic-Daten in Ihre bestehenden Analytics-Tools.
Kostenlose Testversion starten