SEO Tutorial: Eine Robots.txt selber machen
Die Robots.txt ist eine normale Textdatei, welche im Root-Verzeichnis der Webseite liegt. Eine Robots.txt bietet Betreibern von Internet-Seiten die Möglichkeit Einfluß auf die Indexierung von Suchmaschinen zu nehmen. Man kann wahlweise die Indexierung der eigenen Webseite verbieten, einschränken oder komplett erlauben. Hinsichtlich Suchmaschinenoptimierung ist es sinnvoll die Indexierung zuzulassen. Das…
