Apache-2.2

Googlebot 遞增頁面 ID

  • February 19, 2013

下面是我從 googlebot 獲得的成功範例:

66.249.73.171 - - [19/Feb/2013:16:12:39 -0500] "GET /eghm-blah.php?pid=2855 HTTP/1.1" 200 1684 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"

我的文章設置為增加pid新文章的數量……但是我擁有的最高文章pid是 13。googlebot 一直在緩慢增加頁碼並尋找新文章。當它進行訪問嘗試時,它不會 404,因為它eghm-blah.php會顯示一條消息,它找不到您的文章。

有沒有辦法阻止googlebot每天多次訪問我的伺服器來尋找不存在的pid?

eghm-blah.php應該將返回碼設置為 404。您仍然可以在頁面上顯示您想要的任何內容,但返回碼需要為 404。

引用自:https://serverfault.com/questions/480456