diff options
| -rw-r--r-- | robots.txt | 36 |
1 files changed, 36 insertions, 0 deletions
@@ -1,3 +1,39 @@ +# +# ##### +# ###**### +# ###****### +# ###**### +# #### +# ## +# ## +# ## +# #############################################, +# ################################################# +# ################################################## +# ################################################## +# ################################################## +# ****###########......################.......##########**** +# *****##########..00000..############..000000..#########***** +# *****#########.00001100..##########.001010000..########***** +# *****#########.00001100..####x#####.001101000..########***** +# *****##########..00100..####/.\#####..011000..#########***** +# *****###########xx..xx#####/...\#####xx...xx###########***** +# *****#####################/.....\######################***** +# *****####################x-------x#####################***** +# *****##################################################***** +# *****#############001000010000100010000100#############***** +# *****############00010000100001000100001000############***** +# ****############00010000100001000100001000############**** +# #############001000010000100010000100############# +# ################################################## +# ################################################ +# ############################################## +# +# + +User-agent: GPTBot +Disallow: / + User-agent: * Allow: /articles/ Allow: /$ |