Parcourir la source

For server-load and privacy reasons, disallow robots.

Greg Knaddison il y a 14 ans
Parent
commit
f37303d858
1 fichiers modifiés avec 3 ajouts et 0 suppressions
  1. 3 0
      robots.txt

+ 3 - 0
robots.txt

@@ -0,0 +1,3 @@
+# Might as well keep robots away for performance and privacy reasons.
+User-agent: *
+Disallow: /