lolcat
3 долоо хоног өмнө
1 өөрчлөгдсөн 8 нэмэгдсэн ,
1 устгасан
-
8
1
robots.txt
|
|
@@ -13,4 +13,11 @@
|
|
|
# 44
|
|
|
|
|
|
User-agent: *
|
|
|
-Disallow:
|
|
|
+Disallow: /web
|
|
|
+Disallow: /images
|
|
|
+Disallow: /videos
|
|
|
+Disallow: /news
|
|
|
+Disallow: /music
|
|
|
+Disallow: /proxy
|
|
|
+Disallow: /api/v1/ac
|
|
|
+Allow: /
|
