Bei Update des Testshops robots.txt links liegen lassen?

Thema wurde von Anonymous, 6. Oktober 2019 erstellt.

  1. Anonymous
    Anonymous Erfahrener Benutzer
    Registriert seit:
    7. Juni 2018
    Beiträge:
    82
    Danke erhalten:
    2
    Danke vergeben:
    65
    Hallo zusammen,

    ich bin gerade beim Update des Testshops auf 3.14.
    Hat es überhaupt einen Sinn sich um das zu kümmern, wenn sich um Update eines Testshops handelt (s. unten Hinweis aus der Installationsanleitung für Update 3,14)?
    "Falls Ihr Shop in einem Unterverzeichnis liegt, also nicht direkt über den Aufruf der Shopdomain
    erreichbar ist, ist die manuelle Aktualisierung der robots.txt notwendig. Wählen Sie im
    Administrationsbereich des Shops den Menüpunkt Gambio SEO > Robots Datei und klicken
    Sie auf Download, um eine neue robots.txt zu generieren. Speichern Sie die robots.txt Datei
    auf Ihrem Computer und laden Sie sie anschließend mit einem FTP-Programm auf Ihren
    Server, sodass Sie im Hauptverzeichnis der Domain liegt (nicht im Shop-Ordner!). Die Datei
    muss in Ihrem Browser über (Link nur für registrierte Nutzer sichtbar.) erreichbar sein."

    Viele Grüße
     
  2. Dennis (MotivMonster.de)
    Dennis (MotivMonster.de) G-WARD 2013/14/15/16
    Registriert seit:
    22. September 2011
    Beiträge:
    31.303
    Danke erhalten:
    6.268
    Danke vergeben:
    1.118
    Beruf:
    Mann für alles :)
    Ort:
    Weilburg
    wenn dein testshop offline ist is die robots eigentlich egal. is ja eh nix aufrufbar
     
  3. Christian Mueller
    Christian Mueller Beta-Held
    Registriert seit:
    4. Juli 2011
    Beiträge:
    3.824
    Danke erhalten:
    981
    Danke vergeben:
    312
    Im Testshop sollte die robots.txt genau diesen Inhalt haben:

    Code:
    User-agent: *
    Disallow: /
    
    Damit sperrst Du alle Crawler aus und es wird nicht versehentlich etwas indiziert.