GoogleはURLを推測してクロールするかおなじみのGoogleのMatt Cutts（マット・カッツ）氏によるウェブマスター向けQ&Aビデオです。 Does Googlebot use inference when crawling? 今回の質問は、「Googleはクローリングするときに推測を使うのか」です。 たとえば、「site.com/article/page1.htm」と、「site.com/article/page2.htm」というページをインデックスしていた場合、連番のページもあるかもしれないと推理して「site.com/article/page3.htm」のクロールを試みるのかということです。 Matt Cutts氏によれば、Googleは確かにクロールに推測を用いるとのことです。 例として、パラメータ付きのURLを挙げています。 URLに複数のパラメータが付いたとき、そのパラメータを取り除いたURLにアクセスしてみ
