XTCsid aus Google Cache entfernen - 3 einfache Tipps Januar 24. 2010
Bei den XTcommerce (XTC, XT:C) Shopsystemen gibt es immer wieder das leidige Problem mit der Indizierung der URLs mit der Session ID des Shops:
Dadurch werden viele Online Shop Seiten mehrfach indiziert und anstatt den Index mit individuellen Seiten zu füllen (die von den "(Be-)Suchern" gefunden werden sollen), bekommt man ein und die selbe Seite oftmals hundertfach mit unterschiedlichen XTCsid in den Index.
Ob der eigene Online Shop davon betroffen ist, sieht man gar nicht auf den ersten Blick:
Die 'site:' Abfrage bei Google unterdrückt mittlerweile solche ähnliche Seiten bei der normalen Ausgabe.
Man muss Google schon auffordern, die entsprechenden URLs mit XTCsid auch wirklich anzuzeigen. Dazu eignet sich z. B. der 'inurl' Parameter:
Wenn man dann nur einen Treffer für die XTCsid angezeigt bekommt, darf man sich nicht in Sicherheit wiegen:
Erst nach dem man sich alles anzeigen lässt, offenbart sich der volle Umfang des Problems.
Wie geht es nun weiter? Wie bekommt man die XTCsid weg?
http://www.example.com/?XTCsid=d41c607d7726c3aa5fbecdb25761a47a
Dadurch werden viele Online Shop Seiten mehrfach indiziert und anstatt den Index mit individuellen Seiten zu füllen (die von den "(Be-)Suchern" gefunden werden sollen), bekommt man ein und die selbe Seite oftmals hundertfach mit unterschiedlichen XTCsid in den Index.
Ist der eigene Online Shop betroffen?
Ob der eigene Online Shop davon betroffen ist, sieht man gar nicht auf den ersten Blick:
Die 'site:' Abfrage bei Google unterdrückt mittlerweile solche ähnliche Seiten bei der normalen Ausgabe.
site:www.example.com
Man muss Google schon auffordern, die entsprechenden URLs mit XTCsid auch wirklich anzuzeigen. Dazu eignet sich z. B. der 'inurl' Parameter:
site:www.example.com inurl:xtcsid
Wenn man dann nur einen Treffer für die XTCsid angezeigt bekommt, darf man sich nicht in Sicherheit wiegen:
Um Ihnen nur die treffendsten Ergebnisse anzuzeigen, wurden einige Einträge ausgelassen, die den 1 bereits angezeigten Treffern sehr ähnlich sind.
Sie können bei Bedarf die Suche unter Einbeziehung der übersprungenen Ergebnisse wiederholen.
Erst nach dem man sich alles anzeigen lässt, offenbart sich der volle Umfang des Problems.
http://www.example.com/?XTCsid=161cd87c9f1944a3888f5bdec971e8e4
http://www.example.com/?XTCsid=9bfb5f4f77d568b768fc1b347511450a
http://www.example.com/?XTCsid=c900149a7e491a760dfc137354a747f0
...
Wie geht es nun weiter? Wie bekommt man die XTCsid weg?
1. Die Benutzung von Cookies erzwingen!
Man kann heutzutage in keinem der größeren Online Shops mehr einkaufen, ohne dass man Cookies akzeptiert. Warum also soll der eigene Online Shop da eine Ausnahme bilden?
Der XT:commere (XTC) Shop hängt die Session ID (XTCsid) nur an die URLs, wenn man nicht das Sessionhandling über Cookies abwickeln möchte. Also folgende Einstellung im Backend vornehmen:
Konfiguration : Sessions die Cookie Benutzung bevorzugen auf True
Beim ECB Online Shop habe ich damals noch die Einstellung umbenannt in Cookie Benutzung erzwingen!
2. Das Crawlen von URLs mit der XTCsid per robots.txt verbieten
Achtung, hierzu gibt es viele Tipps im WWW, die ein falsche Syntax angeben! Auch die Standardeinstellung im XTC (und diversen Forks) ist da falsch!
Richtig ist:
User-agent: *
Disallow: /*XTCsid*
Jeder, der sich bei den Google Webmastertools angemeldet hat, kann das leicht überprüfen (Website-Konfiguration : Crawler-Zugriff : robots.txt testen). Nur mit dieser Schreibweise des Disallow werden die URLs blockiert.
Falsch sind z. B. :
Disallow: XTCsid
Disallow: /*?XTCsid
Da diese Einträge entweder gar nichts blockieren, oder nur wenn die XTCsid als erster Query-Parameter übergeben wird.
3. Parameter per Google Webmastertools ignorieren lassen
Eine weitere Methode ist noch relativ neu und wird nicht auf der eigenen Seite vorgenommen, sondern kann in den Webmastertools eingestellt werden.
Website-Konfiguration : Einstellungen : Parameterbehandlung
Dort kann man Google direkt mitteilen, dass der Crawler bitte den Parameter XTCsid gleich ganz ignorieren soll. Wer schon dabei ist, kann gleich den Parameter refID der für die Kampagnen verwendet wird mit auf die Liste setzen.
Alle 3 Tipps zusammen und eine gehörige Portion Gedult sollten ausreichen, um die Session ID der XT:commerce Online Shop Systeme (oder der Forks) zu entfernen. Eine Anmerkung muss ich allerdings noch loswerden:
Das Sessionhandling in dem originalen XTC 3.0x ist fehlerbehaftet. Das erzwingen der Cookies funktioniert nicht 100%ig. Ich kann hier nur den ECB-Shop empfehlen, an dem ich bis Ende 2009 noch mit entwickelt habe. Das Session Handling wurde dort von diversen Bugs befreit.
Happy selling,
Mike
Als PDF ansehen: Dieser Artikel | Dieser Monat | Vollständiges Blog
Trackbacks
Trackback für spezifische URI dieses Eintrags
Keine Trackbacks
Kommentare
Ansicht der Kommentare:
(Linear | Verschachtelt)
Klasse Beitrag, ich habe genau das selbe Problem wie du es hier geschildert hast. Mein Problem war bzw. ist es immer noch 
das immer mehr Seiten aus den Google index verschwinden.
Nachdem ich Erklärungen hierfür gesucht habe bin auf deine Seite gestoßen. Ich muß sagen das mit " site:www.example.com inurl:xtcsid " kannte ich garnicht, habe es mal probiert und siehe da geschlagene 1240 Seiten im Google index mit diesem beschissenen XTCSID habe mal alles befolgt was du da geschrieben hast, jetzt bin ich mal gespannt.
Eni Frage hätte ich da noch, wielange wird das in etwa dauern bis diese ganzen urls mit XTCSID aus dem google index sind + kann ich die einzelnen urls nicht auch in den webmastertools zum entfernen einreichen ?
Danke schonmal
das immer mehr Seiten aus den Google index verschwinden.Nachdem ich Erklärungen hierfür gesucht habe bin auf deine Seite gestoßen. Ich muß sagen das mit " site:www.example.com inurl:xtcsid " kannte ich garnicht, habe es mal probiert und siehe da geschlagene 1240 Seiten im Google index mit diesem beschissenen XTCSID habe mal alles befolgt was du da geschrieben hast, jetzt bin ich mal gespannt.
Eni Frage hätte ich da noch, wielange wird das in etwa dauern bis diese ganzen urls mit XTCSID aus dem google index sind + kann ich die einzelnen urls nicht auch in den webmastertools zum entfernen einreichen ?
Danke schonmal
Hi,
wenn Du die einzelnen URLs über die Webmaster Tools entfernen möchtest, musst Du sicherstellen, dass diese - und nur diese - dann auch einen #404 Header zurückliefern.
Ansonsten würde ich durchaus mit ein paar Monaten rechnen!
(sorry, aber den Link habe ich entfernt ...)
wenn Du die einzelnen URLs über die Webmaster Tools entfernen möchtest, musst Du sicherstellen, dass diese - und nur diese
- dann auch einen #404 Header zurückliefern. Ansonsten würde ich durchaus mit ein paar Monaten rechnen!
(sorry, aber den Link habe ich entfernt ...)
Zwischenbilanz nach ca. 4 Monaten: Die Anzahl der Seiten mit XTCSID sind auf 6 geschrumpft! Also man braucht viel Geduld
Alles versucht; Webmastertools, spiders.txt, 301 in der application_top.php.
XTCsid URLs werden immer mehr.
Ich probiere das mit der robots.txt jetzt aus.
Werde berichten. Matth
XTCsid URLs werden immer mehr.
Ich probiere das mit der robots.txt jetzt aus.
Werde berichten. Matth
Hi Matth,
die spiders.txt gibt es für den osCommerce, oder? Hast Du mal geprüft, dass der auch wirklich keine neuen Session IDs (XTCsid bzw. osCsid) anzeigt, wenn ein Bot zugreift?
Du hast keinen Link zum Shop angegeben, sonst hätte ich mal schauen können.
Ciao,
Mike
die spiders.txt gibt es für den osCommerce, oder? Hast Du mal geprüft, dass der auch wirklich keine neuen Session IDs (XTCsid bzw. osCsid) anzeigt, wenn ein Bot zugreift?
Du hast keinen Link zum Shop angegeben, sonst hätte ich mal schauen können.
Ciao,
Mike
Die spiders.txt für osCommerce müsste doch auch für XTC gehen?
Einen Bot zu simulieren, habe ich noch nicht ausprobiert.
Wenn Du schon dabei bist... hier die URL: http: //www. ge-ma-classics-shop.de/
Grüße Matth
Einen Bot zu simulieren, habe ich noch nicht ausprobiert.
Wenn Du schon dabei bist... hier die URL: http: //www. ge-ma-classics-shop.de/
Grüße Matth
Auf die Schnelle sehe ich keine "neuen" URLs, wenn ich als GoogleBot daher komme. Für die normalen User aber werden immer noch Session IDs erzeugt?
Und die alten xt:commerce Shops haben keine spiders.txt ...
Deine URLs sind aber auch recht merkwürdig:
/product_info.php/products_id/10/cPath///lichtmaschine-12-volt-30-ps-typ-at-kaefer.html
Was sollen denn die /// darin?
Und die alten xt:commerce Shops haben keine spiders.txt ...
Deine URLs sind aber auch recht merkwürdig:
/product_info.php/products_id/10/cPath///lichtmaschine-12-volt-30-ps-typ-at-kaefer.html
Was sollen denn die /// darin?
Hi Mike,
Schönheitsfehler.
Ist aber im Prinzip egal, Hauptsache die Keywords sind drin:
Dann wieder ganz normal ohne 3 Slashes:
http:/ /ww w.ge-ma-classics-shop.de/product_info.php/products_id/1352/cPath/8_91/antriebswellen-/-zubehoer/achsmannschette-schraeglenker-antriebswelle-kaefer-karmann-typ3.html
Nur so viel zur Onsite Opt.:
Auto Übernahme Produktüberschrift in Title und URL, bzw. meta keywords in Title.
Hier ein noch Bsp. XTCsid: http:/ /ww w.google.de/search?hl=de&q=k%C3%A4fer+1303+cabrio&as_q=antenne&btnG=In%C2%A0den%C2%A0Ergebnissen%C2%A0suchen
Das ist eine NEUE URL in den SERPs.
Zur spiders.txt, gerade frisch nachgeschaut: In der Originalversion von XTC ist sie mit dabei. Ah ja, nofollow und robots.txt sind den Bots auch ziemlich egal: http:/ /sea rch.seznam.cz/svet?q=vw+t3+tuning+teile&count=10&pId=QGynEDXSCsqBL3HYiF69&from=101
Schwere Zeiten für SEOs.
Grüße Matth
Schönheitsfehler.
Ist aber im Prinzip egal, Hauptsache die Keywords sind drin:
Dann wieder ganz normal ohne 3 Slashes:
http:/ /ww w.ge-ma-classics-shop.de/product_info.php/products_id/1352/cPath/8_91/antriebswellen-/-zubehoer/achsmannschette-schraeglenker-antriebswelle-kaefer-karmann-typ3.html
Nur so viel zur Onsite Opt.:
Auto Übernahme Produktüberschrift in Title und URL, bzw. meta keywords in Title.
Hier ein noch Bsp. XTCsid: http:/ /ww w.google.de/search?hl=de&q=k%C3%A4fer+1303+cabrio&as_q=antenne&btnG=In%C2%A0den%C2%A0Ergebnissen%C2%A0suchen
Das ist eine NEUE URL in den SERPs.
Zur spiders.txt, gerade frisch nachgeschaut: In der Originalversion von XTC ist sie mit dabei. Ah ja, nofollow und robots.txt sind den Bots auch ziemlich egal: http:/ /sea rch.seznam.cz/svet?q=vw+t3+tuning+teile&count=10&pId=QGynEDXSCsqBL3HYiF69&from=101
Schwere Zeiten für SEOs.
Grüße Matth
Ich kenne Deine "Originalversion" nicht, aber in der xtc 3.0.4 SP 2.1 ist bei mir keine drin. Die stehen alle in einem Array in der xtc_check_agent.inc.php ...
Naja, und solange Du mit einem SSL-Proxy arbeitest, statt ein eigenes SSL-Zertifikat zu kaufen, kommst Du um die Session ID sowieso nicht drum herum.
Naja, und solange Du mit einem SSL-Proxy arbeitest, statt ein eigenes SSL-Zertifikat zu kaufen, kommst Du um die Session ID sowieso nicht drum herum.
Es ist vollbracht! Nach fünf Monaten sind die Session IDs (XTCsid) aus dem Google Index verschwunden ...
Lange Zeit
Ciao,
Mike
Lange Zeit
Ciao,
Mike
Servus, wollte nur mal bescheid sagen das meine XTCsid endlich weg sind, es waren mal um 1270 URLs, jetzt nach 3 Monaten sind alle weg. 
Danke für den Beitrag und deine Tipps.
Danke für den Beitrag und deine Tipps.
Sorry, aber den Link maskiere ich ...
http:/ /www. porno-star-dvd.com
http:/ /www. porno-star-dvd.com
Als PDF ansehen: Dieser Artikel | Dieser Monat | Vollständiges Blog
