百度竟然采集搜狐的內(nèi)容

劉秀高今天在搜索的時候，無意中發(fā)現(xiàn)"小說"這個詞排名第8的站，網(wǎng)站描述非常簡單：“含各類小說作品,包括武俠、言情、玄幻等作品。”

    按常理來說，這種超級熱門的詞，站長應(yīng)該懂點seo和簡單的優(yōu)化，不應(yīng)該連網(wǎng)站的描述標(biāo)簽都寫不好，這么簡單。于是，我想是不是百度采用了DMOZ的網(wǎng)站描述，大家都知道Dmoz被多數(shù)主要搜索引擎所采用。但是到dmoz搜索了一下2100book.com，發(fā)現(xiàn)這個網(wǎng)站并沒有被收錄。

  然后我打開這個網(wǎng)站看了下，其主要標(biāo)簽寫法如下：

<meta name="ROBOTS" content="NOODP">
<title>世紀(jì)文學(xué)小說網(wǎng)-玄幻小說,言情小說,網(wǎng)游小說,修真小說,武俠小說,網(wǎng)絡(luò)小說www.2100book.com</title>
<meta name="keywords" content="小說,玄幻小說,言情小說,網(wǎng)游小說,,修真小說,都市小說,武俠小說,網(wǎng)絡(luò)小說,世紀(jì)文學(xué)">
<meta name="description" content="世紀(jì)文學(xué)為國內(nèi)最大的小說網(wǎng)站之一,提供,玄幻小說,言情小說,網(wǎng)游小說,修真小說,都市小說,武俠小說,網(wǎng)絡(luò)小說等在線閱讀,永做更新最快,小說最多的小說網(wǎng)!">

描述標(biāo)簽并不是百度采用描述那樣，有<meta name="ROBOTS" content="NOODP">這個標(biāo)簽，說明站長也以為百度是采用的ODP描述，所以加了這個代碼，但是事實上卻不是。然后我查看源文件，搜索了下 含各類小說作品,包括武俠、言情、玄幻等作品 這句話，發(fā)現(xiàn)頁面上并沒有。

   既然百度既沒有采用網(wǎng)站寫的描述，也沒有抓取頁面上的內(nèi)容作描述，更不是dmoz的描述，那這句網(wǎng)站描述是怎么來的呢。

   于是，我到技術(shù)最強(qiáng)大的google搜索，google了一把， 搜索 "含各類小說作品,包括武俠、言情、玄幻等作品。"，注意帶雙引號，意思是完整匹配，發(fā)現(xiàn)第一個結(jié)果就是小說文學(xué)搜狐分類目錄，其他的就是一些小網(wǎng)站和個人博客了。百度當(dāng)然不可能去采用哪些小網(wǎng)站的內(nèi)容，唯一的可能就是采用了搜狐的分類目錄。

    我再從這里選取了一些網(wǎng)站來百度搜索網(wǎng)站名字，發(fā)現(xiàn)百度的描述果然用的搜狐的。有個別不一樣的，我推測可能是這個原因，百度只是一次抓取了搜狐的分類目錄內(nèi)容，并沒有隨之更新，而搜狐的分類是不斷添加內(nèi)容的，也就是說，描述不相同的網(wǎng)站是百度抓取搜狐分類目錄的時候，還沒有登陸進(jìn)來。

    大家可以來測試下，看看我的推斷是否準(zhǔn)確。

服務(wù)器租用/服務(wù)器托管中國五強(qiáng)！虛擬主機(jī)域名注冊頂級提供商！15年品質(zhì)保障！--億恩科技[ENKJ.COM]