YahooとGoogleの一番の違いは何でしょう。俺はたぶんデータベースの更新のスピードだと思いますよ。というのも・・・
このサイトのURLをあーだこーだいじくって、ほぼitem-xxxx.htmlというフォーマットに統一できました。しかしアクセス自体は今までどおりitemid=xxxxという形式でも問題なくできますし、検索エンジンにitemid=xxxxという形式でキャッシュされていると当然アクセスログにはこの形で残ります。これじゃ本来の目的を達成していることにならないので、robots.txtに
Disallow: /oyaji/index.php?
Disallow: /oyaji/?
という一文を付け足しました。これで検索エンジンにパラメータ付のURLは拾われなくなるはずです。
この結果はいち早くGoogleに表れました。robots.txtを書き換えてから、Googleの検索はみるみるitem-xxxx.htmlというフォーマットに集約されていきます。Googleで検索して飛んでくるURLも同じで、どんどん新しいフォーマットに変わっていきました。
それに対しYahoo検索からはいまだにitemid=xxxxという形式で飛んでくることが多いようです。アクセスするにはいずれのURLでも可能なので閲覧者が見れないということはないでしょうが、折角いろいろやってもしらんぷりのエンジンは
カワイクナイ。だけど、Yahooは新規に拾うスピードはGoogleより速いような気はします。だけどカワイクナイね、絶対。
[独断と偏見に満ちたまとめ]
新規登録は若干Yahooが速いがカワイクナイ
ユーザの意図を汲んだ修正は圧倒的にGoogleが速い。カワイイ。ヨシヨシ。
ユーザの要求を満たさない検索エンジンが、なんで日本ではトップシェアなのか理解できないんですけど。