Den Artikel 2033 weiterempfehlen
E-Mailadresse
 
Suche
FAQ finden
Produktkategorie: Homepage-Baukasten | Hosting | Shops
Artikel ID: 2033
Aktualisiert am: 06.05.2013

So einfach konfigurieren Sie eine "robots.txt" Datei

Bestimmen Sie, welche Suchmaschine Verzeichnisse Ihrer Homepages auslesen darf. Ein Webcrawler, Spider oder Bot einer Suchmaschine liest beim Auffinden einer Webseite zuerst die Datei(en) robots.txt im Hauptverzeichnis (Root) einer Domain aus. Mit Hilfe der robots.txt können Sie festlegen, ob und wie die Webseite von einem Webcrawler besucht werden darf.


Sie haben so die Möglichkeit, ausgesuchte Bereiche Ihrer Domain für (bestimmte) Suchmaschinen zu sperren.


Loggen Sie sich in Ihren passwortgeschützten Kundenlogin ein. Wählen Sie anschließend im rechten Arbeitsbereich das gewünschte Paket aus. Klicken Sie auf der linken Seite auf die Menüpunkte Verwaltung und Website-Configurator.

Klicken Sie nun im rechten Fenster auf den Menüpunkt Einstellungen für Suchmaschinen.



Es öffnet sich nun ein neues Fenster, in dem Sie bestimmen können, für welchen Bereich Ihre Einstellungen gelten sollen.


Möchten Sie die Einstellungen nicht für Ihre gesamte Homepage, sondern nur für ausgewählte Ordner/Verzeichnisse oder nur für spezielle Dateien übernehmen, markieren Sie bitte den Punkt Spezielle Ordner sperren.

Sie haben nun die Möglichkeit, bestimmte Ordner oder Dateien auszuwählen.

Möchten Sie nur Ordner angezeigt bekommen, setzen Sie zusätzlich noch einen Haken in das Kästchen Nur Ordner einblenden.


Möchten Sie Ihre Einstellungen nur für spezielle Webcrawler oder Bots einer Suchmaschine auswählen, markieren Sie bitte den Punkt Spezielle Robots auswählen.

Anschließend können Sie aus einer Liste spezielle Roboter auswählen oder neue hinzufügen.



Sobald Sie alle gewünschten Einstellungen vorgenommen haben, klicken Sie bitte abschließend auf den Button speichern.

Anmerkung: Bitte bedenken Sie, dass es von den Suchmaschinen abhängt, ob und wie schnell Sie gelistet und wie schnell Ihre geänderten Seiten aktualisiert werden. Wir haben darauf keinen Einfluss. Des Weiteren gibt es bei einigen Anbietern auch die Möglichkeit sich direkt austragen zu lassen. Dazu kontaktieren Sie bitte den entsprechenden Betreiber des Dienstes.

Beachten Sie bitte, dass der Website Configurator nicht in jedem STRATO Paket zur Verfügung steht. Sofern Ihr Paket über einen FTP-Zugang verfügt, haben Sie jedoch die Möglichkeit eine selbst erstellte robots.txt auf Ihrem Webspeicherplatz zu hinterlegen.

Beachten Sie bitte, dass der Website Configurator eine neue .htaccess Datei auf Ihrem Webspeicherplatz hinterlegt. Für gegebenenfalls bereits vorhandene, selbst erstellte .htaccess Dateien wird automatisch ein Backup für Sie angelegt. Das Backup erkennen Sie an der Namensgebung .htaccess.bak., die Inhalte dieser .htaccess.bak Datei werden nicht mehr berücksichtigt. Daher ist es gegebenenfalls notwendig, dass Sie diese manuell in Ihre neue .htaccess Datei wieder einpflegen.