Sitemap enthält URLs, die von der "robots.txt"-Datei blockiert werden.

Thema wurde von feuerladen, 31. Juli 2016 erstellt.

  1. feuerladen
    feuerladen Mitglied
    Registriert seit:
    27. Oktober 2015
    Beiträge:
    6
    Danke erhalten:
    0
    Danke vergeben:
    2
    Hallo!

    Diese Meldung (siehe Überschrift) erhalte ich in der Googlekonsole. Beim robots-tester steht vor jeder Zeile: Disallow.
    Zudem benutze ich onpage.org und da steht zur indexierbarkeit bei jeder unterseite: Disallowed via robots.txt...

    Heißt das, bei Gambio wird von vorne herein der Zugriff durch robots blockiert und man muss die URLS, die indexiert werden sollen, händisch umändern?

    Das kommt mir dann doch sehr umständlich vor!

    Hat da jemand einen Rat?

    Liebe Grüße
    Manu
     
  2. Anonymous
    Anonymous Erfahrener Benutzer
    Registriert seit:
    19. Juni 2012
    Beiträge:
    4.831
    Danke erhalten:
    1.125
    Danke vergeben:
    947
    Hallo,

    manche Seiten sind durch die robots.txt standardmäßig gesperrt, z.B. AGB etc oder Seiten, die duplicate content verursachen. Sind es denn Produktseiten und Kategorieseiten, die bei dir gesperrt sind? Gerne mal deine robots.txt posten und auch einen Link zum Shop?

    VG
     
  3. Anonymous
    Anonymous Erfahrener Benutzer
    Registriert seit:
    19. Juni 2012
    Beiträge:
    4.831
    Danke erhalten:
    1.125
    Danke vergeben:
    947
    Scheint alles gut - siehst du?

    Produktseite:
    (Link nur für registrierte Nutzer sichtbar.)

    Kategorieseite:
    (Link nur für registrierte Nutzer sichtbar.)
     
  4. feuerladen
    feuerladen Mitglied
    Registriert seit:
    27. Oktober 2015
    Beiträge:
    6
    Danke erhalten:
    0
    Danke vergeben:
    2
    Tatsächlich! Ok, vielen Dank!