blog.bartlweb - a technologist's external brain

Thema: SEO

unrelavante Suchworte

Unten finden sie für Deutsch und Englisch die gängisten Bindewörter die in Suchanfragen verwendet werden und getrost aus dem Suchstring herausgefiltert werden können

Deutsch

am, auf, an, bei, wie, wo, was, wer, wann, in, die, das, der, ein, eine, zu, nach, ich, von, vom

Englisch

a, about, an, and, are, as, at, be, by, from, how, i, in, is, it, of, on, or, that, the, this, to, was, we, what, when, where, which, with

robots.txt – Suchmaschinenverhalten für die eigene Webseite definieren

Es gibt für Suchmaschinen den Codex sich an den Meta-Tag robots bzw. an die Datei robots.txt beim Indizieren einer Seite zu halten. Über diese beiden Möglichkeiten kann man gezielt steuern welche Seiten von Suchmaschinen erfasst werden und welche nicht. Es ist auch die Kombination von robots.txt und Meta-Tags möglich, hier muss allerdings auf Abhängigkeiten geachtet werden.

robots.txt

Die Datei robots.txt muss im Root-Verzeichnis des Webservers liegen und damit unter http://www.domain.com/robots.txt erreichbar sein.

Alle Robots zulassen

User-agent: *
Disallow:

Alle Robots aussperren

User-agent: *
Disallow: /

Einen Robot aussperren

User-agent: Googlebot
Disallow: /

Alle Robots aussperren und einen zulassen

User-agent: *
Disallow: /
User-agent: Googlebot
Disallow: