Wie man schlechte Bots mithilfe blockiert .htaccess
- 4184
- 1
- Levke Harnapp
Wenn Sie ein Website -Eigentümer sind, sind Sie sich wahrscheinlich der Bedeutung der Suchmaschinenoptimierung (SEO) bewusst, die Bedeutung der Suchmaschinenoptimierung (SEO). Viele Website -Eigentümer erkennen jedoch nicht, dass Bots im Internet kriechen, die die SEO und die Gesamtfunktionalität Ihrer Website schädigen können. Schlechte Bots können Ihrer Website auf verschiedene Weise schaden, z. B. das Abkratzen Ihrer Inhalte, das Spamm Ihrer Formulare und sogar die Ausführung von DDOS -Angriffen.
In diesem Artikel werden wir diskutieren, wie Sie verwenden können .Htaccess, um schlechte Bots vom Zugriff auf Ihre Website zu verhindern.
Identifizieren Sie schlechte Bots
Bevor Sie schlechte Bots blockieren können, müssen Sie wissen, welche Sie zielen müssen. Es stehen viele Tools zur Verfügung, mit denen Sie die Bots identifizieren können, die auf Ihre Website zugreifen. Google Analytics kann Ihnen beispielsweise zeigen, auf welche Bots auf Ihre Website zugreifen, wie oft sie es tun und auf welchen Seiten sie besuchen.
Sobald Sie die Bots identifiziert haben, die Sie blockieren möchten, können Sie verwenden .HTaccess, um eine schwarze Liste der Benutzeragenten zu erstellen. Ein Benutzeragenten ist eine Zeichenfolge, die Bots verwenden, um sich auf Ihrer Website zu identifizieren. Zum Beispiel identifiziert sich GoogleBot mit dem Benutzeragentenzeichenfolge “GoogleBot.”
Erstellen Sie eine schwarze Liste
Um eine schwarze Liste der Benutzeragenten zu erstellen, können Sie den folgenden Code in Ihrem verwenden .HTaccess -Datei:
RewriteEngine on Rewritecond %http_user_agent badbot1 [nc oder] rewritecond %http_user_agent badbot2 [nc, oder] rewritecond %http_user_agent badbot3 rewriterule ^(http_user_agent.*) $ - [f, l]| 12345 | RewriteEngine onrewritecond %http_user_agent badbot1 [nc oder] rewritecond %http_user_agent badbot2 [nc, oder] rewritecond %http_user_agent badbot3rewriterulle ^(http_user_agent.*) $ - [f, l] |
In diesem Beispiel verwenden wir die Umschreiben Richtlinie, um zu überprüfen, ob die Http_user_agent Header passt zu einem unserer schlechten Bots. Wenn dies der Fall ist, verwenden wir die Rewriterule -Direktive, um einen 403 verbotenen Fehler zurückzugeben.
Der NC Flagge bedeutet "kein Fall", Das bedeutet, dass das Match von Fall unempfindlich ist. Der ODER Flaggen bedeutet, dass wir nach mehreren Bedingungen und die prüfen und die L Flag bedeutet, dass dies die letzte Regel ist, die verarbeitet wird.
Testen Sie Ihre .HTaccess -Datei
Sobald Sie Ihre schwarze Liste erstellt haben, ist es wichtig, Ihre zu testen .HTaccess -Datei, um sicherzustellen, dass sie wie erwartet funktioniert. Sie können Tools wie die Webmaster -Tools von Google verwenden, um den Datenverkehr Ihrer Website zu überwachen und sicherzustellen, dass die Bots, auf die Sie abzielen, blockiert werden.
Sie können auch ein Tool wie einen schlechten Bot -Blocker verwenden, um automatisch eine Liste schlechter Bots zum Blockieren zu erstellen. Dieses Tool aktualisiert automatisch Ihre .HTAccess -Datei mit einer Liste schlechter Bots, sodass Sie Ihre Website vor schädlichen Bots schützen können.
Abschluss
Das Blockieren von schlechten Bots ist ein wichtiger Schritt, um Ihre Website vor böswilligen Angriffen zu schützen. Durch die Nutzung .HTAccess Um eine schwarze Liste von Benutzeragenten zu erstellen, können Sie verhindern, dass schädliche Bots auf Ihre Website zugreifen und die allgemeine Sicherheit verbessern. Denken Sie daran, den Datenverkehr Ihrer Website regelmäßig zu überwachen und Ihre Blacklist nach Bedarf zu aktualisieren, um Ihre Website zu schützen.