moe hat sich ein paar gedanken über bots und das indizieren gemacht, denn nicht jede seite ist für einen normalen bot wirklich interessant. zu diesen gehören der editiermodus, die versionkontrolle und vorallem die seiten mit den referrers. wakkawiki: Goog
