通智雲智能搜尋:AI 驅動的站內搜尋解決方案
摘要:通智搜尋是面向企業站內檢索場景的 AI 檢索解決方案,用關鍵詞召回、語義向量召回與混合融合排序解決搜不到與搜不準,用標準化接入與搜尋分析解決接不進與看不見。
企業在站內檢索上的投入,常被「能搜出東西」這一最低標準掩蓋了真實問題。四種失效形態最常見:零結果率偏高、前幾條與意圖不匹配、數據分散在多套系統無法統一檢索、查詢日誌只儲存不分析。它們分別落在召回、相關性、數據接入與效果度量四個層面,換分詞器或改前端都解決不了。本文說明通智搜尋的能力構成、接入方式、適用條件與差異,並給出上線節奏與度量口徑。
關鍵要點
- 企業站內檢索的失效集中在四類:零結果率高、相關性差、多源數據接不進、缺乏搜尋分析。
- 一套可用的檢索能力需要四層:查詢理解、多路召回與融合排序、干預規則、效果度量。
- 關鍵詞召回保障精確與可解釋,語義向量召回跨越詞彙鴻溝,混合融合排序兼顧兩者。
- 查詢理解(分詞、糾錯、同義、意圖)決定召回品質上限,是相關性優化的前置環節。
- 干預規則層不能被演算法取代:置頂、屏蔽、同義詞仍是日常營運的主要手段。
- 度量先建基線再迭代,看零結果率、首位點擊率、搜尋退出率等口徑。
一、企業站內檢索的四個真實痛點
搜不到:零結果率高。 輸入合理查詢卻返回空結果頁,直接後果是會話中斷。成因多為分詞粒度與業務詞不匹配、同義詞缺失、新商品或新文件未及時入索引。零結果查詢是最有價值的需求缺口訊號,拆解見站內搜尋零結果率怎麼降?8 個可落地策略。
搜不準:相關性差。 結果有,但排在前面的不是用戶要的。根因多為排序特徵單一:只用文本相似度,未納入銷量、庫存、時效與點擊反饋等訊號。這類問題不體現在零結果率上,只有點擊分佈能暴露。
接不進:多源數據孤島。 商品在交易中臺、文件在知識庫、工單在客服系統,各自一套入口。Elastic 對企業檢索的定義即覆蓋組織內的結構化與非結構化數據,用於站點、電商、知識庫與客服等場景——多源接入是第一道門檻。
看不見:缺乏搜尋分析。 沒有查詢日誌的聚合檢視,就不知道用戶在搜什麼、哪些詞長期無結果,優化只能憑經驗猜測。
二、能力構成:四層結構
通智搜尋按四層組織能力,便於定位問題出在哪一層。
| 能力層 | 主要職責 | 關鍵輸出 |
|---|---|---|
| 查詢理解 | 分詞、糾錯、同義擴展、意圖識別、改寫 | 查詢串、意圖標籤、改寫候選 |
| 召回與排序 | 關鍵詞與向量召回、融合排序、精排 | 候選集與排序分值 |
| 干預規則 | 置頂、屏蔽、降權、同義詞、時效加權 | 排序覆蓋規則 |
| 效果度量 | 查詢分析、零結果報表、點擊歸因 | 看板與調優依據 |
查詢理解決定召回品質的上限。Elastic 的 suggester 通過 suggest 參數給出形近詞與候選詞,是糾錯與聯想的通用實現思路;學術界則在探索用大語言模型做查詢重寫與意圖補全。
召回與排序兩路並行:關鍵詞路保精確,向量路保語義。混合檢索把兩路結果融合後輸出,融合常用倒數排名融合(RRF),按排名位置而非原始得分合併,避免分值尺度不一致。兩路召回的邊界見語義搜尋是什麼?向量檢索與關鍵詞檢索全面對比。
干預規則是業務側兜底:商品置頂、內容屏蔽、品牌別名等價是規則問題,混進模型會增加排查難度。
三、數據流與接入:從數據源到效果回收
整條鏈路分四段:數據源接入 → 索引構建 → 查詢服務 → 效果回收。
數據源接入。 三類常見方式:數據庫增量同步(監聽 binlog 或按更新時間輪詢)、業務系統 API 主動推送、物件儲存檔案批次匯入。接入時需確定欄位對應:標題、正文、類目、標籤、時間、狀態、權限標識。
索引構建。 含分詞器設定、向量編碼、結構化欄位建索引、增量與全量重建策略。上線前應做一次索引校驗,抽樣核對覆蓋率與欄位完整性,避免「接進去了卻缺了一半欄位」。
查詢服務。 以 HTTP API 提供,請求經查詢理解後進入多路召回與融合排序,返回命中列表、分面聚合與偵錯資訊;權限在這一層先過濾再打分。站點前端與流動 App、後台系統、客服工作台是三類集成方式:前一類關注時延與聯想,後台系統更關注篩選與權限隔離。介面參數見通智搜尋介面說明書。
效果回收。 採集曝光、點擊、翻頁、無點擊離開與下單或自助解決事件,日誌既入分析報表,也作排序與同義詞挖掘輸入。
四、適用場景:五類業務的側重點差異
不同業務的數據形態與成功標準差異明顯。
| 場景 | 檢索對象 | 設定側重點 | 主要風險 |
|---|---|---|---|
| 電商 | 商品、SKU、屬性規格 | 精確屬性過濾、庫存與可售狀態、品牌別名同義詞 | 過度語義化破壞型號匹配 |
| 內容平臺 | 文章、影片、專題 | 時效權重、標題與正文差異化權重、話題聚合 | 語義泛化導致主題漂移 |
| 企業知識庫 | 文件、表格、掃描件 | 權限過濾、文件解析、段落級檢索 | 權限漏配造成越權可見 |
| 客服幫助中心 | 常見問題、工單、話術 | 自然語言提問處理、答案直達、自助解決率 | 與工單系統不同步 |
| SaaS 產品內檢索 | 客戶數據、功能入口、說明文件 | 多租戶隔離、時延控制、混合內容類型 | 跨租戶串擾,索引更新不及時 |
判斷重心先看查詢串形態:以型號、編碼、訂單號為主的業務,關鍵詞召回與結構化過濾權重更高;以完整問句為主的業務,語義召回與查詢理解收益更直接。
五、與自建、開源、通用 SaaS 的差異
四類路線各有適用條件,選擇取決於數據複雜度與團隊工程能力。
| 維度 | 自建檢索系統 | 開源方案(Elasticsearch 等) | 通用 SaaS 檢索 | 通智搜尋 |
|---|---|---|---|---|
| 初始投入 | 高,需專職團隊 | 中,需自行調優 | 低,註冊即接入 | 低,按數據源接入 |
| 上線週期 | 長,逐項自研 | 中,語義需自補 | 短 | 短,含查詢理解與混合召回 |
| 可控性 | 最高,可改演算法 | 高,源碼開放 | 較低,受邊界約束 | 中,演算法與規則可配 |
| 營運負擔 | 全部自擔 | 自擔叢集與版本 | 服務商承擔 | 服務商承擔 |
| 語義與融合排序 | 需自研模型與融合 | 需引入向量庫與模型 | 視產品而定 | 內置雙路召回與融合 |
| 業務干預 | 需自研營運後台 | 需自建規則介面 | 提供基礎規則 | 置頂、屏蔽、同義詞 |
| 搜尋分析 | 需自建埋點看板 | 需自行搭建報表 | 提供基礎報表 | 內置查詢分析報表 |
| 適合條件 | 檢索為核心壁壘 | 有團隊、要自主權 | 需求通用、求快上 | 求快上並保留干預 |
已有開源方案且運行穩定的團隊不必整體替換,常見做法是保留索引、增量接入語義召回與融合排序。
六、落地步驟與上線節奏
第一階段:接入與基線。 完成數據盤點與欄位對應,確定權限標識,構建索引並跑通查詢 API,同時採集線上日誌建立基線,至少含零結果率、首位點擊率、搜尋退出率三項。沒有基線就無法判斷調優方向。
第二階段:調優。 按優先級推進:先修零結果(分詞、同義詞、欄位補全),再修相關性(混合權重、排序特徵),最後做互動(聯想、糾錯、篩選)。評估須按查詢類型分段看,整體指標會掩蓋「模糊查詢漲了、精確查詢崩了」,方法見搜尋相關性排序怎麼優化?召回 + 排序雙階段方法。
第三階段:灰度與 A/B。 按比例切流,對照組保留原策略,確認差異達到統計顯著後再全量。
第四階段:持續營運。 建立週度查詢分析:新增零結果詞補同義詞、高曝光低點擊結果複查排序、上下架內容同步更新。檢索效果不是一次性項目。
七、效果怎麼度量:核心指標清單
離線測試集判斷演算法改動方向,可參照 BEIR 這類基準用自有查詢集加人工標註構建;線上指標判斷真實收益。
| 指標 | 口徑 | 關注點 | 常見改進動作 |
|---|---|---|---|
| 零結果率 | 無結果查詢數 / 總查詢數 | 需求缺口與索引覆蓋 | 補分詞、補同義詞、補欄位 |
| 搜尋退出率 | 搜尋後無點擊的會話佔比 | 結果頁是否滿足意圖 | 調整排序特徵與展示密度 |
| 首位點擊率 | 首位結果點擊數 / 查詢數 | 首條結果相關性 | 優化融合權重與精排 |
| 前三位點擊佔比 | 前三名點擊數 / 總點擊數 | 好結果是否靠前 | 排序加權與干預規則 |
| 查詢改寫率 | 觸發糾錯或改寫的查詢佔比 | 查詢理解生效範圍 | 更新糾錯與同義詞表 |
| 搜尋轉化率 | 搜尋會話完成目標行為的佔比 | 檢索的業務貢獻 | 結合結果內容與頁面優化 |
| 響應時延 P95 | 95% 查詢的返回耗時 | 體驗與穩定性 | 索引優化、快取與擴容 |
建議先鎖定零結果率、搜尋退出率、首位點擊率作為主指標。完整框架見什麼是站內搜尋?原理、核心指標與能力框架。
常見問題
問:通智搜尋和數據庫自帶的模糊查詢有什麼區別?
答:模糊查詢只做字符串包含匹配,沒有分詞、同義、糾錯與相關性排序,內容量上萬條後明顯退化;通智搜尋提供查詢理解、雙路召回、融合排序與搜尋分析。
問:已經在用 Elasticsearch,還需要接入通智搜尋嗎?
答:不一定需要整體替換。常見做法是保留現有索引,由通智搜尋補上查詢理解、語義召回、融合排序與規則設定介面,減少自建這部分能力的工作量。
問:語義向量召回上線後,同義詞詞表還需要維護嗎?
答:需要,但職責變了。語義模型覆蓋大部分通用同義表達,業務強相關的等價詞(品牌別名、內部簡稱)模型學不到,詞表轉為精確糾偏的補充。
問:接入需要改造現有業務系統嗎?
答:多數情況下不需要。數據側通過增量同步或 API 推送接入,查詢側改為呼叫檢索 API,前端保留原有展示結構;改造量集中在欄位對應與權限梳理。
問:數據權限如何保證不越權?
答:權限標識在接入階段作為獨立欄位寫入索引,查詢時先按權限過濾再打分排序,確保不可見內容不進入候選集;上線前建議做一輪越權測試。
問:怎麼判斷搜尋優化真的見效了?
答:看三件事:是否有調優前的基線、是否按查詢類型分段評估、是否經過 A/B 且差異統計顯著。只看整體點擊率容易被平均掉。
關於通智雲
通智搜尋面向企業站內檢索場景,提供查詢理解、關鍵詞與語義向量雙路召回、混合融合排序、干預規則與搜尋分析能力,支援站點、App 與後台系統接入。通智雲(TENGENCE)是 AI 時代的企業增長引擎,專注公域引流獲客與私域轉化成交;核心產品為通智 GEO(GEO + SEO 雙引擎)與通智搜尋。
相關閱讀
資料來源
- Elastic《What is enterprise search?》:企業檢索覆蓋組織內的結構化與非結構化數據,用於站點、電商、知識庫與客服場景——支撐「多源數據孤島」一節。
- Elastic《What is hybrid search?》:混合檢索把關鍵詞匹配與向量相似度兩路結果融合後輸出——支撐雙路召回與融合排序。
- Elasticsearch 官方指南《Reciprocal rank fusion》:按排名位置而非原始得分合併——支撐融合排序可避免兩路分值尺度不一致。
- Elasticsearch 官方參考《Suggester examples》:suggest 參數基於輸入文本給出形近詞建議——支撐查詢理解層糾錯與聯想。
- arXiv《Query Understanding in the Age of Large Language Models》(Anand 等,2023):用大語言模型做查詢重寫與意圖補全——支撐「查詢理解決定召回品質上限」。
- arXiv《BEIR: A Heterogenous Benchmark for Zero-shot Evaluation of Information Retrieval Models》(Thakur 等,2021):異構檢索零樣本評測基準——支撐用自有查詢集構建離線基線。