網(wǎng)絡(luò)爬蟲(chóng)活動(dòng)增加，關(guān)于蘋(píng)果將推出搜索引擎的猜測(cè)再現(xiàn)

8 月 28 日消息 多名開(kāi)發(fā)者最近在他們的網(wǎng)站日志中看到蘋(píng)果的網(wǎng)絡(luò)爬蟲(chóng) Applebot 的活動(dòng)增加，這再次引發(fā)了蘋(píng)果可能計(jì)劃推出一個(gè)成熟的搜索引擎的猜測(cè)。然而，更有可能的是，這些爬蟲(chóng)活動(dòng)應(yīng)該與蘋(píng)果改善 Siri 和 Spotlight 搜索結(jié)果的工作有關(guān)。

數(shù)字營(yíng)銷(xiāo)洞察公司 Coywolf 的創(chuàng)始人喬恩 - 亨肖 (Jon Henshaw)本周在一篇博客文章中稱(chēng)，Applebot 已經(jīng)開(kāi)始每天定時(shí)抓取他的網(wǎng)站，這是他之前沒(méi)有注意到的。而在 Twitter 上，Stack Overflow 工程師 Nick Craver 和數(shù)字營(yíng)銷(xiāo)顧問(wèn) Michael James Field 也注意到最近幾天 Applebot 在他們所監(jiān)管的網(wǎng)站上的抓取量激增。

和其他網(wǎng)絡(luò)爬蟲(chóng)一樣，Applebot 也會(huì)掃描網(wǎng)絡(luò)，根據(jù)幾個(gè)因素來(lái)幫助確定搜索結(jié)果的排名，這些因素包括用戶(hù)參與度、搜索詞與網(wǎng)頁(yè)主題和內(nèi)容的相關(guān)性和匹配度、網(wǎng)頁(yè)從其他網(wǎng)站獲得的鏈接數(shù)量，以及網(wǎng)頁(yè)的設(shè)計(jì)特點(diǎn)。

正如 Henshaw 所指出的那樣，蘋(píng)果在 7 月份更新了 Applebot 的支持文檔，增加了新的細(xì)節(jié)。

- 增加了如何驗(yàn)證 Applebot 的流量

- 擴(kuò)充了 Applebot 用戶(hù)代理的細(xì)節(jié)，包括桌面版和移動(dòng)版的區(qū)別

- 擴(kuò)展的 robots.txt 規(guī)則

- 增加了一個(gè)部分，說(shuō)明他們不僅僅是抓取 HTML，還可以渲染類(lèi)似于 Google 的頁(yè)面。

- 增加了一個(gè)關(guān)于搜索排名和影響網(wǎng)絡(luò)搜索結(jié)果排名的因素的部分。

鑒于蘋(píng)果宣傳自己是一家注重隱私的公司，沒(méi)有像谷歌或 Facebook 那樣的廣告或數(shù)據(jù)驅(qū)動(dòng)的商業(yè)模式，因此不確定它是否會(huì)想走推出一個(gè)成熟的搜索引擎的道路。

至少?gòu)?2015 年開(kāi)始，蘋(píng)果要推出搜索引擎的傳聞就出現(xiàn)了，當(dāng)時(shí)蘋(píng)果首次確認(rèn)了其 Applebot，并發(fā)布了一系列與搜索相關(guān)的工作招聘。

目前，Applebot 可能仍然致力于改善 Siri 和 Spotlight 的搜索結(jié)果，正如蘋(píng)果在其支持文件中所說(shuō)的那樣。了解到，在 6 月份的 WWDC 主題演講中，蘋(píng)果表示，Siri 可以提供的事實(shí)數(shù)量是三年前的 20 多倍。