看板 Blog 關於我們 聯絡資訊
轉貼自Taiwan.CNET.com http://taiwan.cnet.com/news/software/0,2000064574,20124786,00.htm 記者鍾翠玲/台北報導  08/10/2007 雅虎旗下的無名小站據信設下了系統限制,使雅虎以外的搜尋服務都無法搜尋到該站上的 部落格或相簿。 無名小站部落格、相簿的使用者上周發現,無名小站做了一些修改,讓Google、MSN等搜 尋引擎的機器人無法「爬」到這些服務。換句話說,其他使用者將漸漸無法透過雅虎以外 的搜尋服務連結到這些網站。 使用者近來發現,無名小站的robot.txt檔內容近來遭到更改: User-agent: Slurp Disallow: User-agent: * Disallow: / 其中第一行是說明專提供給雅虎搜尋引擎的機器人來「爬」。一個開放所有搜尋服務的網 站,一般是不會多加特殊限制的,專家表示。 消息由上周首度傳出,漸次傳開後,效應已漸漸發生。根據知名網站XDite的說法,目前 已有些部落格,如「彎彎」利用Google搜尋時,已經只剩下網誌標題名,內容的庫存檔 (cache)都不在了。而記者自行以CNET專欄作家之一「獨孤木」分別輸入雅虎及Google搜 尋的結果,結果類似,Google僅可查詢到首頁。 不願公開姓名的網站管理員指出,目前有些無名上的網站內頁雖然還可以透過別的搜尋引 擎找得到,但隨著Google、MSN清掉了自己的庫存檔(cache),未來就漸漸找不到了。 對許多曾想以Google Ads等廣告形式獲利,或單純想實現發表欲的網友而言,搜尋引擎是 目光—以及流量—的最主要來源。而僅僅做了這個小修改,就能使網站文章被閱讀的機率 大為下降,因為除非被使用者加入書籤,否則仰賴其他搜尋服務查詢來尋找資訊的使用者 ,將可能無緣造訪該站,除了雅虎的使用者外。 無名此舉也令許多無名使用者感到憤怒與不解。「這意思簡單就是說,我們這些在無名寫 blog的blogger,又變成了Yahoo跟無名手下的玩具。他們想到了,就把我們文章被 Google 到的機會給攔胡了。」獨孤木在部落格中指出。 部落格作者辛可表示,對無名這種需要流量的服務來說,這種作法只有傷害。而使用者會 不會因為找不到部落格或相簿的不便而放棄原有搜尋習慣,他也不認為雅虎有佔任何好處 。 網友BillyPan在自己的部落格中提出抗議,並發起串聯行動。 這已不是雅虎/無名使用者第一次對其服務感到不滿。雙方合併後,首先發生金、銀卡會 員權益的糾紛。今年稍早,無名使用者被迫更改密碼,以及與雅虎帳號合併。不過雅虎方 面表示仍儘力滿足多數使用者需求。 對於無名設定檔的問題,雅虎方面尚無肯定回應。台灣雅虎總經理洪小玲於上周被問及此 問題表示還不太清楚狀況,需要進一步確認。今日雅虎方面公關人員則表示還在了解技術 細節。 如果雅虎真的採取了這種作法,XDite作者質疑是反其道而行。「使用者寫網誌用盡任何 手段就是在爭曝光,如果把曝光機會幹掉了,他不搬家走人才怪。誰還會為了搜不到,通 通跑去用你雅虎的搜尋引擎。」他說。 -- ※ 發信站: 批踢踢實業坊(ptt.cc) ◆ From: 125.232.2.35
Jerr:獨孤木說robots.txt拿掉了 http://funp.com/t31435 10/09 11:19
yesonline:http://www.wretch.cc/robots.txt 消失XD 10/09 11:38