Apache-2.2
Googlebot 遞增頁面 ID
下面是我從 googlebot 獲得的成功範例:
66.249.73.171 - - [19/Feb/2013:16:12:39 -0500] "GET /eghm-blah.php?pid=2855 HTTP/1.1" 200 1684 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
我的文章設置為增加
pid
新文章的數量……但是我擁有的最高文章pid
是 13。googlebot 一直在緩慢增加頁碼並尋找新文章。當它進行訪問嘗試時,它不會 404,因為它eghm-blah.php
會顯示一條消息,它找不到您的文章。有沒有辦法阻止googlebot每天多次訪問我的伺服器來尋找不存在的pid?
eghm-blah.php
應該將返回碼設置為 404。您仍然可以在頁面上顯示您想要的任何內容,但返回碼需要為 404。