AI大模型加持，生成式搜索來了！

夢晨 2022-12-11 13:15:49 來源：量子位

夢晨 發(fā)自 凹非寺
量子位 | 公眾號 QbitAI

最近有兩件事，讓搜索引擎重回聚光燈下。

百度發(fā)布“文心百中”，用AI大模型技術驅動的產業(yè)級搜索系統(tǒng)。構建企業(yè)內部搜索引擎的人力成本減少90%以上，同時只需要極低數(shù)據。

幾乎同一時間，OpenAI最新發(fā)布聊天機器人ChatGPT，網友發(fā)現(xiàn)用它來尋找問題的答案雖然有時會出錯，但直接得到完整回答的感覺要比從搜索中再去挑選爽快多了。

搜索引擎這個經典技術，就要迎來一輪變革了嗎？

想當年，搜索引擎是PC互聯(lián)網時代的流量入口，絕對的王者。

進入移動互聯(lián)網時代后，雖然不再是最受關注的焦點，但搜索也仍舊是高頻剛需，逐漸融入人們的日常生活。

當人們重新把目光看向搜索引擎，也會注意到它這些年并沒有停止進化。

搜索變了

過去一提到搜索，肯定離不開關鍵詞。前幾屆世界杯時，人們更習慣于搜“世界杯 直播地址”，關鍵詞之間用空格隔開。

就好像把所有網頁當成一個大文檔，用類似Ctrl+F的方式去對關鍵詞做匹配。

隨著手機、移動互聯(lián)網的普及，人們的需求也在變化，現(xiàn)在更傾向于提出一個問題，并期待搜索引擎能直接給出回答。

如搜索“世界杯直播在哪看？”，更口語化也更復雜，甚至一些時候就是語音轉換出來的。

搜索引擎也在適應這種變化，給出的結果不再是單純的頁面排序。

針對一些問題，會給出對內容深入理解后的答案抽取。

有時會給出更直觀、更容易跟著操作的視頻內容。

甚至在理解需求的基礎上出現(xiàn)配套的服務跳轉。

這些變化看起來并不復雜，背后卻要有很多技術做支撐。

在這里要重點講一下百度今年亮相的兩項新技術，“知一”和“千流”。

先看跨模態(tài)大模型知一，AI技術在搜索場景落地的代表。

簡單來說，知一大模型可以從全網形態(tài)各異的資源中持續(xù)學習，無論是文本、圖片、視頻還是結構化信息都可以融會貫通。

打破了資源形態(tài)的界限，就更容易理解用戶的搜索需求。

從技術層面講，知一使用了百度文心大模型技術。大規(guī)模預訓練技術提升模型性能，蒸餾壓縮率高達99%的模型小型化技術以降低成本，得以在搜索場景全面應用。

據了解，目前知一在百度搜索的各場景中每天要進行上萬億次的推理。如此巨大的使用規(guī)模又帶來新的問題，如何把滿足需求的結果高效呈現(xiàn)給用戶。

這就要提到新一代索引技術千流，負責把不同維度的信息進行智能有序的組織。

千流與之前的索引技術相比，主打多領域、多維度表達的立體柵格化索引。

如何理解柵格化？

在過去，搜索引擎為提高效率會把內容按質量橫向分層。先從高質量內容開始檢索，滿足需求就可以及時返回結果，還未滿足再進入下一層。

如今，在千流中又把質量最高的一批內容按領域垂直分層。質量分層+內容命中結合，一橫一縱把內容切分成柵格按需檢索，大大減少每次檢索的計算量。

百度工程師透露，這樣節(jié)省下的計算量也沒有閑著，而是對內容進行精耕細作，用不同的算法從多維度提高索引的質量。

還有一個額外好處，在不同柵格之間可以應用個性化算法。就好比“一魚多吃”，不同的部分使用不同的烹飪方法。

知一和千流配合起來，整個系統(tǒng)還會根據模型最新學習到的知識，進行實時動態(tài)調整，確保最優(yōu)檢索效果。最大程度避免無效計算，最終把滿足需求的結果高效呈現(xiàn)給用戶。

這些新技術，在實際業(yè)務中是否起到了效果呢？

答案或許可以從數(shù)據中找。

反饋驅動創(chuàng)新

9月份舉辦的萬象·百度移動生態(tài)大會，百度指出，過去一年，百度搜索規(guī)模逆勢增長17%。

最新的百度第三季度財報也顯示，移動端搜索查詢次數(shù)同比實現(xiàn)兩位數(shù)的增長。

百度集團資深副總裁、百度移動生態(tài)事業(yè)群組（MEG）總經理何俊杰指出，其中的關鍵是“反饋驅動創(chuàng)新”。

一方面反饋來自智能搜索。百度搜索每天響應來自100多個國家、幾十億次的搜索請求。

另一方面則來自智能推薦。2022年第三季度百度App信息流內容分發(fā)量同比增長23%，其中的用戶點贊、評論、分享也都是用戶最直接的反饋。

用戶的高頻需求，驅動著AI技術變革。新技術又能激發(fā)新用戶需求表達，兩者構成“雙輪驅動”，持續(xù)推動搜索進化。

比如虛擬人技術加持下，可以實現(xiàn)交互式對話，單純的搜索之外又有了聊天、陪伴需求。

正如百度研究院在年初的十大科技趨勢中所預測的，AIGC（AI Generated Content，人工智能生成內容）在今年大放異彩。

未來AIGC繼續(xù)與搜索深度結合，還將帶來“搜索即生成”甚至“搜索即創(chuàng)造”。

不會再有“抱歉，沒有找到相關的網頁，請檢查您的輸入是否正確”，而是用戶點下搜索按鈕的一瞬間，本不存在的內容由AI即時創(chuàng)造出來。

百度CEO李彥宏前段時間也說過：

隨著技術的突破，AI作畫、AI視頻、甚至AI構建一個虛擬世界可能都會像手機拍照一樣簡單。

而一切技術的突破和創(chuàng)新，都離不開人才。

為了更好推動技術和算法創(chuàng)新、促進產學研交流、培養(yǎng)人才，百度舉辦了首屆搜索技術創(chuàng)新挑戰(zhàn)賽。

大賽提供30萬元總獎金池、提供英偉達A100算力資源，更是有機會接觸到百度海量搜索業(yè)務的脫敏數(shù)據。

本屆大賽分為兩個賽道：

搜索問答，旨在探索開放領域搜索場景。面對網頁文檔質量參差不齊、長短不一，問題答案分布零散、長度較長等問題，希望參賽者能進一步提升深度智能問答效果，給用戶提供更好的搜索體驗。

搜索模型推理優(yōu)化，對于保障億萬用戶流暢的搜索體驗、控制算力成本開銷至關重要。希望參賽者通過各種優(yōu)化技術，挑戰(zhàn)最優(yōu)的模型推理性能。

大賽期間，百度還提供了豐富的相關課程和學習資料，搜索技術與GPU加速計算專家也將提供全程的技術輔導。

本次大賽對全社會開放，消息一出立即吸引了大量高校學生、企業(yè)團隊或個人開發(fā)者，目前已有1500+隊伍報名參加，成為搜索技術領域一次盛會。

大賽地址：
https://sti.baidu.com