SEO Tutorial: Eine Robots.txt selber machen
Thursday, November 20th, 2008Die Robots.txt ist eine normale Textdatei, welche im Root-Verzeichnis der Webseite liegt. Eine Robots.txt bietet Betreibern von Internet-Seiten die Möglichkeit Einfluß auf die Indexierung von Suchmaschinen zu nehmen. Man kann wahlweise die Indexierung der eigenen Webseite verbieten, einschränken oder komplett erlauben. Hinsichtlich Suchmaschinenoptimierung ist es sinnvoll die Indexierung zuzulassen. Das ist soweit jedem bekannt. Diese [...]