Gast: robots.txt

Beitrag lesen

SELF-Forum

robots.txt

Gast
– Informationen zu den Bewertungsregeln

Guten Tag,
kann ich mit folgender Angabe in robots.txt den Zugriff der Bots auf
a l l e   meine Unterverzeichnisse verhindern?

Disallow: /*/

Kann ich die Verhaltensweise der Bots selbst testen/feststellen?

Danke für Ihre Hilfe!

Beitrag melden
–
Informationen zu den Bewertungsregeln
0 40

robots.txt

Gast
  • sonstiges
  1. 0
    Beat
    1. 0
      Gast
      1. 0
        Cheatah
        1. 0
          Gast
          1. 0
            Gast
            1. 0
              Auge
              1. 0
                Gast
                1. 0
                  zaphod1984
                2. 0
                  Auge
                  1. 0
                    Gast
                    1. 0
                      Peter
                    2. 0
                      Auge
                      1. 0
                        Gast
                        1. 0
                          Peter
                          1. 0
                            Gast
                            1. 0
                              Beat
                              1. 0
                                Youngster
                                1. 0
                                  Beat
                                2. 0
                                  Auge
                                  1. 0

                                    Nachtrag

                                    Auge
                                  2. 0
                                    Youngster
                                    1. 0
                                      Auge
                                      1. 0
                                        Youngster
                                        1. 0
                                          Auge
                                          1. 0
                                            Youngster
                        2. 0
                          Youngster
                        3. 0
                          Struppi
                          1. 0
                            Youngster
                            1. 0

                              +++ WARNUNG +++

                              Peter
                              • browser
                              1. 0
                                Youngster
                                1. 0
                                  Peter
                        4. 0
                          Auge
                    3. 0
                      Beat
            2. 0
              ChrisB
              1. 0
                Gast
                1. 0
                  ChrisB
                2. 4
                  dedlfix
      2. 0
        Beat
  2. 0
    JürgenB