Sitemap erstellen

[Jens_S]

Frage,

ist es Sinvoll eine Sitemap für Suchmaschienen zu erstellen ?
Oder wie läst man die webseite am besten Indexieren.

möcht keine fehler machen, kenne mich zwar mit normalen webseiten aus aber beim affilinator bin ich mir nicht sicher.

[FrankW]

Da gibt es schon einige Beiträge zu.
Manch einer schwört drauf, andere (wie ich) halten die Sitemap gerade für solche Produktseiten ohne Linkpower und Trust für Blödsinn.
Mir will es einfach nicht in den Kopf, dass sich Google davon wirklich irritieren lässt. Bei einer normalen Seite mit einer gesunden Navigation von mir aus, aber bei einer Produktsuchmaschine mit 15 Millionen Produkten und theoretisch unbegrenzter Seitenzahl ?
Wie groß solll die werden und wie werden Prioritäten unterschieden ?

Wichtig ist, dass du nicht irgend ein billiges Sitemap Skript unkontrolliert über deine Domain jagdst, da dieses ansonsten eben unkontrolliert und evtl. nicht zu bremsen massive Last erzeugen kann.

Ich würde bei der Webseite mittels noindex,nofollow ganz klar entscheiden was irgendwie nützlich ist und in den Index darf und was nicht.
beispiel showShop - Shop Startseiten - hast du das was verändert oder sieht die 1:1 aus wie in der Auslieferversion ?

Danach entscheiden primär Links was wie schnell indexiert wird.

[Jens_S]

Zur Frage:

wenn ich eine Sitemap einreiche beisp. google werden die in der Map vorhandenen uRL,s doch indexiert.
So nun nehmen wir an das ein User diese Über google suche Findet und auf denn link Klickt, jetzt das eigentliche Problem, die webseite Öffnet sich ja nicht, sonder es wird ein Capcha abfrage gemacht, und der User ist weg.
weil wer gibt schon einen capchcode da ein der mal eben ein buch sucht.

und wenn mann den crawlertrap abschaltet steht über der webseite "crawlertrap ist deaktiviert"
und ich weis nicht ob dann ein quereinstieg zur seite möglich ist

Frage, welche seiten kann mann indexieren lassen ohne dann eventuel problem mit dem Crawlertrap zu habe.
Und tote links im index von google stehen zu haben.

Danke

[FrankW]

wenn ich eine Sitemap einreiche beisp. google werden die in der Map vorhandenen uRL,s doch indexiert.

- wie gesagt, da streiten sich die Geister.
Ich versuche immer Google logisch zu betrachten:
Du reinst also eine Sitemap ein, sagen wir mal mit 5 Millionen Seiten - was soll Google damit ?
Alle sofort indexieren, sagen wir mal freundlich in 30 Tagen statt in 3 Jahren, was wohl eher die normale Zeit wäre ?!
Und dann soll Google die auch noch berücksichtigen ?
Im Index heißt ja auch nicht gleich gut gerankt, sondern vielleicht auch eher Platz 7365.

Eigentlich sind sich alle SEO einig - weniger ist mehr !

So nun nehmen wir an das ein User diese Über google suche Findet und auf denn link Klickt, jetzt das eigentliche Problem, die webseite Öffnet sich ja nicht, sonder es wird ein Capcha abfrage gemacht, und der User ist weg.
weil wer gibt schon einen capchcode da ein der mal eben ein buch sucht.

- den verstehe ich nicht - die Crawlertrap greift nur ein, wenn jemand die robots.txt NICHT beachtet udn den versteckten Crawlertrap Link anklickt, was ein Besucher eigentlich nicht tut.
Dann werden die IP und der UA des bösen Bots für ich meine mindestens 6 Stunden gesperrt bzw. nach Ablauf der Mindestzeit wieder freigegeben, sobald der nächste in die Falle geht.
Gerade dynamische DialIN IP werden also von alleine wieder frei.
Die Seite selbst erscheint nicht im Index.

und wenn mann den crawlertrap abschaltet steht über der webseite "crawlertrap ist deaktiviert"
und ich weis nicht ob dann ein quereinstieg zur seite möglich ist

- passiert wie gesagt nicht, die Trap ist primär deine letzte Waffe gegen Spambots, Emailsammler, Contentdiebe und alles was da draißen in gigantischen Massen so täglich deinen Server angreift.
Der Einsatz ist Pflicht, alleine schon, damit einzelne User die APIs nicht täglich mit Millionen Anfragen bombardieren, falls der eigene Server das aushalten würde.

Frage, welche seiten kann mann indexieren lassen ohne dann eventuel problem mit dem Crawlertrap zu habe.
Und tote links im index von google stehen zu haben.

- siehe oben, ich denke du hast das Prinzip nicht verstanden (-:
Ich meine hier war es noch mal erklärt.

[Jens_S]

Hi Frank,

Diese Doko sollte mann sich wiklich ein paar mal Duchlesen, dann ist alles Verständlicher.
kann ich jedem der es nicht Versteht empfehlen.

Danke.