robots.txt

Von Hausmeister, Di, 2006-01-24 21:39

Nachdem die Suchmaschinen diese Webstätte entdeckt haben, war das Protokoll gespickt mit erfolglosen Zugriffen auf robots.txt. Also habe ich mal sone Datei gebastelt auf Grund der Hinweise bei http://www.drupalcenter.de/node/598 und http://drupal.org/node/22265. Merke: Bei letzterem gibt es auch Tipps zum Vorgehen wenn mehrere Webstätten aus einer Drupal-Installation gespeist werden.

Trackback-URL dieses Beitrags:

http://souvenirs.jotefa.de/trackback/36

Kommentar hinzufügen



Der Inhalt dieses Feldes wird geheim gehalten und nicht öffentlich gezeigt.



Eingabeformat:
Expand filter description
  • Erlaubte HTML-Tags: <a> <em> <strong> <cite> <strike> <code> <ul> <ol> <li> <dl> <dt> <dd> <blockquote> <br> <sub> <img> <div>
  • Zeilen und Absätze werden automatisch erzeugt.
  • Easily link to terms in various wikis. For help, see interwiki.
  • Images can be added to this post.
Expand filter description
  • Web and e-mail addresses are automatically converted into links.
  • Zeilen und Absätze werden automatisch erzeugt.