采集俠請求bing搜索頁面有問題，curl獲取得到的搜索結(jié)果很少
采集俠請求bing搜索頁面有問題，curl獲取得到的搜索結(jié)果很少
我認為和ip地址有關(guān)，bing可能根據(jù)數(shù)據(jù)庫里的ip對應(yīng)的地理位置來判斷地區(qū)。你可以清除cookie后掛個國外**試試。
我的測試結(jié)果（測試goagent搜索）：
本地（國內(nèi)ip）
搜索結(jié)果被限制了，只有72條
立陶宛ip：
可以看出語言也變成了立陶宛（Lithuanian）的語言了，搜索結(jié)果為179,000條
立陶宛ip（將headers添加中文語言限制）：
————————————————————華麗分割：
如果有先用本地ip訪問后的cookie保留著，再用國外的ip訪問：
結(jié)果立馬增加到了386,000條
結(jié)論：
地區(qū)判斷應(yīng)該與ip地址（數(shù)據(jù)內(nèi)是否收錄也有關(guān)系）有關(guān)–用于法律限制，而搜索結(jié)果與henders和cookie里面的語言和地區(qū)有關(guān)。
必應(yīng)與百度的區(qū)別_必應(yīng)和百度有什么不同
搜索引擎可以為用戶繪制一幅一目了然的信息地圖，供用戶隨時查閱。它們從互聯(lián)網(wǎng)提取各個網(wǎng)站的信息(以網(wǎng)頁文字為主)，建立起數(shù)據(jù)庫，并能檢索與用戶查詢條件相匹配的記錄，按一定的排列順序返回結(jié)果。
下面介紹一下必應(yīng)和百度的區(qū)別。
必應(yīng)簡介 是微軟公司于2009年5月28日推出的全新搜索引擎服務(wù)。必應(yīng)集成了多個獨特功能，包括每日首頁美圖，與Windows 8.1深度融合的超級搜索功能，以及嶄新的搜索結(jié)果導(dǎo)航模式等。用戶可登錄微軟必應(yīng)首頁，打開內(nèi)置于Windows8 操作系統(tǒng) 的必應(yīng)應(yīng)用，或直接按下Windows Phone手機搜索按鈕，均可直達必應(yīng)的網(wǎng)頁、圖片、視頻、詞典、翻譯、資訊、地圖等全球信息搜索服務(wù)。 作為最貼近**用戶的全球搜索引擎，微軟必應(yīng)一直致力于為**用戶提供了美觀、高質(zhì)量、國際化的中英文搜索服務(wù)。百科
必應(yīng)特點 1.必應(yīng)之美:每日首頁美圖 2.與Windows操作系統(tǒng)深度融合 3.全球搜索與英文搜索 4.輸入中文，全球搜圖 5.跨平臺，必應(yīng)服務(wù)應(yīng)用產(chǎn)品 百度簡介 中文搜索引擎，2000年1月創(chuàng)立于北京中關(guān)村。百度的使命是讓人們最便捷地獲取信息，找到所求。其核心價值觀是“簡單可依賴”。
1999年底，身在美國硅谷的李彥宏看到了**互引擎服務(wù)的巨大發(fā)展?jié)摿?，抱著技術(shù)改變世界的夢想，他毅然辭掉硅谷的高薪工作，攜搜索引擎專利技術(shù)，與徐勇一同回國，于2000年1月1日在中關(guān)村創(chuàng)建了百度**公司。注冊地在英國的開曼群島。2013年6月13日消息，阿里巴巴集團已經(jīng)把集團下各個平臺的**電話接入百度搜索，并且阿里集團還將支付寶智能**系統(tǒng)接入百度應(yīng)用。
百度產(chǎn)品 1.網(wǎng)頁搜索 2.垂直搜索 3.百度快照 4.社區(qū)產(chǎn)品 5.電子商務(wù) 必應(yīng)和百度的區(qū)別 1.必應(yīng)和google一樣，都沒有顯示快照的更新時間，只是直接顯示一個“緩存頁”鏈接 2.和google一樣，沒有在搜索結(jié)果中搜索，百度有“在結(jié)果中找”的按鈕 3.必應(yīng)的智能糾錯，有點先斬后奏的感覺。比如搜索關(guān)鍵詞“無限鼠標”會自動顯示“無線鼠標”類似結(jié)果，但搜索框下面會有提示讓用戶選擇：“包括 無線鼠標 的搜索結(jié)果”、“僅顯示 無限鼠標 的搜索結(jié)果”百度google都會有提示：您是不是要找：“無線鼠標”。 4.必應(yīng)收錄結(jié)果比百度google少很多，共 552 條，比如以落伍為例：site:im286.com，百度收錄了一百多萬，google收錄了兩百多萬，而必應(yīng)只收錄了20萬。
同樣：site:www.sina.com.cn，百度google都有幾千條結(jié)果，必應(yīng)只有五百多條。 5.與色字相關(guān)內(nèi)容諱莫如深，即使搜索像“**”、“**”這樣不是很**的內(nèi)容，百度google都是有結(jié)果的，必應(yīng)則是一片空白，并明確提示：搜索“**”可能會返回**內(nèi)容。要獲得搜索結(jié)果，請更改搜索文字。
必應(yīng)收錄排名為啥**就沒了
屬于百度更新的網(wǎng)站波動。獲取網(wǎng)站的性能數(shù)據(jù)，利用免費的SEO工具并分析，以提高在必應(yīng)搜索結(jié)果上的網(wǎng)頁排名。
必應(yīng)的信息收入方式是指信息收入的方式，是通過一定的程序，一定的手續(xù)，和一定的注意步驟，然后收取相應(yīng)的信息的方式。
在發(fā)帖之前，請按照其中的要求，在帖子中填寫諸如軟件名稱、**網(wǎng)址、接口人****、軟件介紹、軟件大小、下載鏈接、支持操作系統(tǒng)等信息，然后請等待相應(yīng)的通知。而若是開發(fā)商，則也點擊其中相應(yīng)的鏈接即可知道該怎么做。
必應(yīng)候補名單
必應(yīng)候補名單有關(guān)信息如下：
1、加入候補名單。
一般情況下，申請必應(yīng)加入候補名單需要2-3個月的時間，但也有可能會更長。
首先，你需要提交一份申請，其中需要提供你的基本信息，網(wǎng)站統(tǒng)計信息，網(wǎng)站內(nèi)容信息等，以及你的網(wǎng)站是否符合必應(yīng)的規(guī)定。
提交申請之后，必應(yīng)會對你的網(wǎng)站進行審核，審核過程中可能會有一些問題需要你修改，或者有一些新的要求需要你滿足，這些都會影響到你的申請審核時間。另外，由于必應(yīng)的審核流程比較復(fù)雜，很多時候申請者也會等待較長時間才能獲得審核結(jié)果。
總的來說，申請必應(yīng)加入候補名單的時間可能會有所不同，一般來說在2-3個月內(nèi)可以完成審核。
2、更新候補名單。
更新必應(yīng)候補名單的時間因情況而異，一般情況下，更新的周期大概是1-2個月，但也可能更少或更多。除此之外，必應(yīng)還會根據(jù)當前的市場情況和技術(shù)發(fā)展來調(diào)整更新的周期，以保持其服務(wù)的質(zhì)量和穩(wěn)定性。
此外，必應(yīng)也會根據(jù)用戶的反饋和需求，加快或減慢更新的速度，以滿足用戶的需求。
總之，更新必應(yīng)候補名單的時間可能會有所變化，但大致上來說，一般情況下，更新的周期大概是1-2個月。
