Session IDs im Google Index trotz Spider Sessions vermeiden und robots.txt
Neuerdings sind wieder vermehrt Session IDs im Index zu finden, trotzdem dass Spider Sessions vermeiden seit Jahren auf True steht und die XTCsID in der robots.txt ausgeschlossen ist.
Meine Vermutung ist nun, dass die Funktion xtc_check_agent() in meiner alten 3.04 Version nicht mehr rund läuft, bzw. der Googlebot sich neue, zusätzliche Namen zugelegt hat, die nicht in meinem Array enthalten sind. Dort ist übrigens nur "googlebot" zu finden bei den ca. 300 eingetragenen Bots.
Könnte ich richtig liegen mit meiner Vermutung und was müsste/sollte ich hier noch eintragen?
|