From 32de5ba58e1f3f26093eb9a557ed2b2d4012f91f Mon Sep 17 00:00:00 2001 From: ache Date: Sat, 6 Apr 2024 11:33:36 +0200 Subject: Add a robot to robots.txt --- robots.txt | 36 ++++++++++++++++++++++++++++++++++++ 1 file changed, 36 insertions(+) diff --git a/robots.txt b/robots.txt index e78ba90..4cdb1be 100644 --- a/robots.txt +++ b/robots.txt @@ -1,3 +1,39 @@ +# +# ##### +# ###**### +# ###****### +# ###**### +# #### +# ## +# ## +# ## +# #############################################, +# ################################################# +# ################################################## +# ################################################## +# ################################################## +# ****###########......################.......##########**** +# *****##########..00000..############..000000..#########***** +# *****#########.00001100..##########.001010000..########***** +# *****#########.00001100..####x#####.001101000..########***** +# *****##########..00100..####/.\#####..011000..#########***** +# *****###########xx..xx#####/...\#####xx...xx###########***** +# *****#####################/.....\######################***** +# *****####################x-------x#####################***** +# *****##################################################***** +# *****#############001000010000100010000100#############***** +# *****############00010000100001000100001000############***** +# ****############00010000100001000100001000############**** +# #############001000010000100010000100############# +# ################################################## +# ################################################ +# ############################################## +# +# + +User-agent: GPTBot +Disallow: / + User-agent: * Allow: /articles/ Allow: /$ -- cgit v1.2.3