Ergebnis der Suchanfrage

• Forum: Programmieren allgemein

  Re: Meta Tags und robots.txt

   
    by Matze, 10. Feb 2008
  Hallo Alex,
  
  wie gesgat, mit der robots.txt kannst du Verzeichnisse ausschließen. Das Problem ist dann nur, dass in allen deinen Links das Verzeichnis "main" auftaucht und Suchmaschinen diese Links jedoch aufgrund der Regel im der robots.txt nicht indizieren werden. Entweder musst du dann mit ModRewrite arbeiten (das kann sehr nervtötend sein) oder du machst es, wie angesprochen, direkt mit den...
• Forum: Programmieren allgemein

  Re: Meta Tags und robots.txt

   
    by Matze, 10. Feb 2008
  Hallo,
  
  für die anständigen Suchmaschinen, die die robots.txt auswerten, genügt diese Datei normalerweise im Hauptverzeichnis (Domain):
  
  User-agent: *
  Disallow: /main/
  
  Edit: Wäre es nicht sinnvoller, die Domain direkt auf /main/ zeigen zu lassen? genau so mache ich es nämlich bei mir und dann besteht dieses Problem nicht.