newb frage: wie "spidert" google meine links net?

hallo.

die startseite von www.josh.ch ist schön in google aufgeführt, wenn ich nach bestimmten worten des contents suche. aber alle anderen seiten schauen kaum in google vorhanden zu sein! verfolgt der google spider denn die links auf meiner seite zu den anderen contents nicht, oder was muss ich da abändern???

thx für antwort!

Hier kannst du sehen, welche Seiten deiner Website Google bereits gespidert und indexiert hat: http://www.google.ch/search?sourceid=navcl...sh%2Ech+%2Dasdf

Aber wie ich schon ein paar mal erwähnt habe, würde ich dein URL-Design dringend vereinfachen. Session-IDs und Parameter würde ich komplett verschwinden lassen. Wenn du trotzdem auf Parameter angewiesen bist, dann benutze doch mod_rewrite zur Vereinfachung deiner URLs. Auch ein Vorteil von mod_rewrite ist, dass du dynamische URLs statisch aussehen lassen kannst - was positiv für alle Suchmaschinen ist, nicht nur für Google.

Gruss, Remo

hrm aber was macht denn das für sinn?? wieso verfolgt google die links auf meiner page nicht weiter? es wird ja wohl kaum 100x der gleiche link mit ner anderen session oder so sein?! (so für so dumm halte ich google dann doch wieder nicht).
mod_rewrite ist tatsächlich hübsch, aber ich hab momentan keine zeit, mich in die materie einzuarbeiten...

gruss j0sh

Hi Josh,

Also ich befasse mich noch nicht sehr lange mit Suma Optimierung...
Jedoch kann ich mir sehr gut vorstellen und es ist eigentlich auch logisch, dass Google lieber eine page indexieren oder spidern wird, welche z.B. in der form (www.josh.ch/tools/phptool.php) gelinkt ist, also einen riesen langen link wie dieser: (http://www.josh.ch/josh/_home.php?show=content&show_menu=phpMyWebmin&show_menu_sub=Overview&type=text&session=]http://www.josh.ch/josh/_home.php?show=con...e=text&session=)

Ändere doch einfach mal das Menü ab wenn dir die Google erfassung so wichtigtig ist, dann kanst du das mal testen ob google besser spidert...

@Josh:
Der Sinn ist ein einfacher. Eine Suchmaschine will einfach nicht riskieren, in eine Sackgasse zu laufen. Und bei dynamischen Seiten ist da die Gefahr nun mal viel grösser. Und ausserdem ist es für die Besucher viel angenehmer, wenn sie hinter dem Link schon erkennen können, worüber sich der Content handeln mag. Diesen Punkt finde ich fast wichtiger.

Hier ein paar Beispiele von grossen Seiten, die diese Methode vorbildlich im Griff haben:
http://www.google.ch/search?sourceid=navcl...en%2Ede+%2Dasdf
http://www.google.ch/search?num=100&hl=de&...com+-asdf&meta=

Gruss, Remo

hrm ok, tönt irgendwie auch logisch. allerdings finde ich es doch ziemlich bedenklich, dass google "riskante" seiten einfach überfliegt, da so doch wichtige resourcen vergessen werden können.

ich habe ein sehr ausfürhliches tutorial über ein 3d programm, welches meines wissens einzigartig im web ist (bis vor einiger zeit auf jeden fall, hab schon lange nicht mehr nachgeprüft).
ich habe alleine wegen dem tut 2000 unique visitors pro monat, und das scheinbar nur per mund zu mund propaganda und links auf einigen wenigen seiten. in google ist das tutorial überhaupt nicht vorhanden.

bei sowas frage ich mich schon ein bissel über die politik von google und co.

nun jo, ich werde wohl bei zeiten mit mod_rewrite herumzuspielen versuchen müssen.

aber gibt es irgendwelche kriterien, damit dynamic content websites trotzdem gespidert werden? ich meine, viele foren werden ja auch gespidert, obwohl die kaum mehr als eine topic id im link haben...?!

gruss j0sh

Es ist ja nicht so, dass deine Seite gar nicht gespidert wird. Z.B. sind diese zwei Seiten in Google drin:
1. http://www.josh.ch/josh/_home.php?show_menu=aboutMe&session=
2. http://www.josh.ch/josh/_home.php?show_men...orials&session=

Ich habe einfach die Erfahrung gemacht, dass statische Seiten schneller und kompletter indexiert werden.

Zwei Sachen, die sehr wichtig sind, und bei dir fehlen, sind mir noch aufgefallen:
1. Der Title-Tag ist auf allen Seiten gleich. Das darf nicht sein, denn der Title-Tag ist sehr wichtig, sowohl für die Suchmaschinen-Platzierung, als auch für Besucher, die in Suchmaschinen suchen, da sie diesen als ersten sehen. D.h. jeder Title-Tag muss individuell den Inhalt der entsprechenden Unterseite beschreiben.
2. Bei dir fehlt eine Sitemap. Bei dynamischen Seiten ist es so, dass sie meist erst indexiert werden, wenn sie mindestens je einen Backlink haben (am besten von einer statischen Seite). Schau dir mal die Sitemap dieses Forums an. Dies hilft bei SuMas ungemein: http://www.webmasterforum.ch/sitemap.html

Ausserdem sollte deine Startseite nicht die URL http://www.josh.ch/josh/_home.php?show=fil...&show_menu=home haben, sondern ganz einfach http://www.josh.ch. Dann hast du auch eine Chance auf einen PageRank...

Weitere Infos findest du auf:
http://www.webmasterworld.com
http://www.markcarey.com/googleguy-says/
http://www.suchmaschinentricks.de
http://www.at-web.de
etc.

Gruss, Remo

ok, da klärt sich also einiges. vielen dank.
bevor ich alles neu code, werd ich also mal n bissel hinter die bücher gehen. vielen dank!

gr33tz j0sh

hrm http://www.suchmaschinentricks.de hat mir schon vieles offenbart. schau mir grad mod_rewrite genauer an... scheint sehr vielversprechend zu sein, auch wenn die syntax etwas eigensinnig ist...

Ja, auf den Suchmaschinen-Seiten schwirrt wirklich einiges an Wissen herum. Man muss es sich nur nehmen ;-).

Viel Erfolg!

also das mod_rewrite funzt soweit *EINIGERMASSEN*, nachdem ich mir die zähne fast ausgeknirscht habe...
allerdings hab ich folgendes kleines prob:

RewriteRule ^xxx_(.*)_(.*)_(.*).html$ article.php?menu=$1&menu_sub=$2&content=$3

der code funktioniert nur, wenn die file article.php, auf welche weitergeleitet werden soll, im root dir des servers ist (also localhost). wenn ich z.b. ein mein_ordener/ vor den filenamen stelle, wird das einfach ignoriert... was kann ich da tun??

danke für hilfe.
ich weiss, das ist kein coder forum, aber es passt ja schliesslich zum thema.

gr33tz j0sh

Hier eine Info aus erster Hand, warum Google Probleme mit Session-IDs hat. Die Info stammt von einem Google-Mitarbeiter, der im Webmasterworld.com-Forum regelmässig Fragen beantwortet:

http://www.markcarey.com/googleguy-says/ar...-paramters.html

danke.

Der Grund, warum Google keine Session ID mag, ist noch ein anderer:

Zitat Google:

Denk mal an folgendes:
1. Schritt: Google kommt und findet auf der Startseite z.B. einen Link zu einer dynamischen Seite. Er kommt wieder und spidert die Seite mit Session ID
2. Google spidert einige Zeit später wieder Deine Startseite und findet einen Link zu einer Seite mit einer anderen Session ID. Der Spider 'denkt', es ist eine 'neue' Seite, es ist aber die alte, die er schon gespidert hat.
3. Der Spider kommt immer öfter und findet immer mehr 'neue' Seiten.
4. Dein Server sagt unter der Last Tschüß !!!

Also: nutze mod_rewrite, um dynamischen Seiten ein statisches Aussehen zu verpassen. Session IDs dürfen nur 'echte' besucher bekommen, Spider nie!

ok, is kloar!

wie ist es eigentlich mit submit-buttons? sucht ein spider auch die action="" url ab?

Ein Spider kann nicht rechnen bzw. Code ausführen.

Er findet zwar die Ziel URL des Scriptes, aber dann ist auch Schluß mit Lustig

hi,

wenn Seiten aus header, template und footer zusammengesetzt sind, wohin gehören metatags und title?

Danke

Durch mod_rewrite wird das Rekursions-Problem nicht behoben, sondern nur verschleiert. Wozu soll jemand mod_rewrite benutzen? Etwa, um den Server unter "der Last" zusammenbrechen zu lassen (wie du selbst sagst)? Warum empfiehlst du das?

Der Rekursionsschutz basiert auf einer maximalen Linktiefe - sobald diese überschritten wird, bricht Google den Crawlvorgang ab. Bloßes verschleiern verhindert nicht, dass Google den Crawlvorgang irgendwann abbricht.

Gruß, SloMo