電商搜索邏輯全解析
編輯導(dǎo)語:對于電商平臺來說,搜索功能是至關(guān)重要的,可以說是最核心的功能,好的搜索設(shè)計往往可以吸引用戶,促進(jìn)用戶點擊商品,從而實現(xiàn)交易的轉(zhuǎn)化。接下來,本文作者通過剖析電商行業(yè)的專屬特點和需求,并結(jié)合其個人經(jīng)驗,為我們分享了他總結(jié)的解決方案,并且預(yù)測了電商搜索的未來趨勢。
搜索功能一定是一家電商平臺技術(shù)中最重要的核心的功能,我相信大家對此都無異議。
因為無論產(chǎn)品經(jīng)理設(shè)計了多么完美的產(chǎn)品邏輯,老板砸了多少錢去做拉新用戶,如果用戶在搜索體驗時,搜索結(jié)果不符合預(yù)期或者不滿足其搜索需求,那么之前所做的工作都會付之東流了。
畢竟電商服務(wù)的行業(yè)屬性還是促進(jìn)業(yè)務(wù)的轉(zhuǎn)化,實現(xiàn)買賣成單。
本文通過剖析電商行業(yè)的專屬特點和需求,并結(jié)合個人經(jīng)驗分享解決方案,希望對大家有所啟發(fā)~
一、搜索的業(yè)務(wù)邏輯
“搜索Query→查詢語義理解→召回→排序→搜索結(jié)果”
當(dāng)用戶在搜索框輸入一個Query時,系統(tǒng)通過對語義的理解,召回相關(guān)文檔或商品,在通過算法排序,安客戶實際的搜索意圖進(jìn)行前后排序,最終解決其搜索需求,實現(xiàn)業(yè)務(wù)轉(zhuǎn)化。
其中【查詢語義理解】與【排序】對搜索引導(dǎo)的業(yè)務(wù)目標(biāo)最為重要。
二、自然語言處理技術(shù)(NLP)在搜索上的應(yīng)用
1. 概念介紹
想實現(xiàn)搜索引擎效果的優(yōu)化,就一定要對自然語言處理技術(shù)有一定的了解,因為用戶輸入一個Query里從學(xué)術(shù)角度解讀,自然語言智能研究實現(xiàn)了人與計算機(jī)之間用語言進(jìn)行有效通信,它是融合語言學(xué)、心理學(xué)、計算機(jī)科學(xué)、數(shù)學(xué)、統(tǒng)計學(xué)于一體的科學(xué)。
自然語言處理被學(xué)者譽為”人工智能皇冠上的明珠“,研究覆蓋了感知智能、認(rèn)知智能、創(chuàng)造智能這樣的學(xué)科,是實現(xiàn)完整人工智能的必要技術(shù)。
1)感知智能
是指從無結(jié)構(gòu)化數(shù)據(jù)中識別出重要的要素。比如給一個query,分析出包含的人民、地名、機(jī)構(gòu)名等。
2)認(rèn)知智能
是在感知之上,能夠理解其中要素的含義以及進(jìn)行一些推理。比如“謝霆鋒是誰的兒子 ?誰是謝霆鋒的兒子”兩句話。詞和實體都差不多,但語義差別很多。這是認(rèn)知智能要解決的問題。
3)創(chuàng)造智能
比如計算機(jī)指能夠理解語義的基礎(chǔ)上,創(chuàng)造出符合常識、語義、邏輯的句子。比如自動寫出行云流水的小說、創(chuàng)造娓娓動聽的音樂 ? ?能夠無違和跟人自然聊天等。
2. NLP搜索分析路徑
三、電商搜索的特點
1. 關(guān)鍵詞堆砌
例如:楊冪同款夏季連衣裙包郵。
2. 詞序?qū)φZ義影響不大
例如:楊冪同款女夏季連衣裙包郵;女夏季連衣裙包郵楊冪同款。
3. 類目預(yù)測問題
例如:當(dāng)用戶查詢“蘋果”時,可能查詢的是水果,也可能是手機(jī)品牌。
4. 搜索引導(dǎo)的業(yè)務(wù)轉(zhuǎn)化比重較大
據(jù)統(tǒng)計,綜合類電商搜索引導(dǎo)轉(zhuǎn)化占比40%以上,垂直類電商搜索引導(dǎo)轉(zhuǎn)化占比60%以上。
5. 穩(wěn)定性要求較高,支持彈性擴(kuò)容
活動、大促系統(tǒng)QPS可能是平時的百倍千倍,需要平滑的擴(kuò)縮容,保障系統(tǒng)的穩(wěn)定。
四、電商搜索優(yōu)化核心內(nèi)容
1. 分詞(劃重點?。?/h3>
1)分詞效果的優(yōu)化直接影響召回數(shù)量,減少無結(jié)果率,提高搜索召回質(zhì)量
例如:
“火鍋九塊九包郵”
- 效果差的分詞方式:“火、鍋、九、塊、九、包、郵”;“火鍋、九、塊、九、包郵”
- 效果好的分詞方式:“火鍋、九塊九、包郵”
”925銀耳飾“
- 效果差的分詞方式:“925、銀耳、銀、耳飾”
- 效果好的分詞方式:“925、銀、耳飾”
2)不同的分詞方式直接影響著參與召回的關(guān)鍵詞,從而影響召回的準(zhǔn)確性
目前很多開源自建系統(tǒng)難以實現(xiàn)很好的分詞效果,主要原因是訓(xùn)練語料的數(shù)據(jù)量有限,不足以形成可以不斷打磨深耕的行業(yè)數(shù)據(jù)。
尤其電商行業(yè)商品種類豐富,中文字、詞表達(dá)的意義多樣,多音字、同義詞又眾多的情況下,靠自身算法工程師和開發(fā)團(tuán)隊很難實現(xiàn)快速的解決優(yōu)化,這是一個不斷積累訓(xùn)練的漫長過程。
3)強(qiáng)烈建議選擇云產(chǎn)品(電商推薦阿里云開放搜索、內(nèi)容\日志搜索推薦ES)
現(xiàn)成的百萬級訓(xùn)練語料、行業(yè)模板直接接入,畢竟專業(yè)領(lǐng)域交給更專業(yè)的人,我們才有更多資源投身到業(yè)務(wù)迭代中去。
2. 實體識別
1)電商搜索-實體識別含義
識別Query中的品牌、品類、款式、風(fēng)格等具有電商行業(yè)特色的實體。
2)召回時保留重要性高的實體詞,對重要性低的部分不影響召回,只影響算法排序
例如:在電商Query中,在實體重要性如果按高、中、低三檔來分。
其中“品牌、品類”是在高檔,也就是最重要的;其次“風(fēng)格、款式、顏色、季節(jié)、人群、地點…”處于中檔;最后“尺寸、修飾詞、影響服務(wù)、系列、單位…”處于低檔,可以丟棄不參與召回。
3. 類目預(yù)測
舉例說明:
- 用戶搜索“蘋果”可能是想要水果的蘋果,也可能是蘋果手機(jī);
- (用戶搜索“華為”,召回結(jié)果按銷量排序,可能銷量最高的“華為手表”、“華為配件”排在前面,實際的搜索意圖”華為手機(jī)“卻排在后面。
類目預(yù)測就是根據(jù)類目下的文本信息和行為數(shù)據(jù),計算query與類目的相關(guān)度,從而達(dá)到預(yù)測query的查詢意圖的目的,計算哪些類目與query最相關(guān),用類目相關(guān)度影響搜索結(jié)果的排序。
也就是說,當(dāng)通過行為數(shù)據(jù)分析,發(fā)現(xiàn)搜索”華為”的用戶,大部分的搜索意圖都為“手機(jī)”,那么召回排序上優(yōu)先“手機(jī)類目”。
4. 排序算法
電商排序常見問題:
- 數(shù)據(jù)缺乏時效性:難以平衡優(yōu)質(zhì)商品和新發(fā)布商品之間的權(quán)衡關(guān)系;
- 商家刷排名:部分商家找到排序漏洞,通過關(guān)鍵詞堆砌,獲得靠前位置,用戶體驗不好;
- 人力資源緊張:需要專業(yè)算法工程師2-3名,很難找到合適的人才。
5. 人工干預(yù)bad case
舉例說明:
- “iPhone11”剛上市時,用戶搜索“蘋果/iphone”,最新款產(chǎn)品肯定要排在前面,在沒有常規(guī)排序算法的時候,就需要類目預(yù)測人工干預(yù);
- “噴泡”是一款籃球鞋的別稱,并非主流叫法,全稱是“Air Jordan AirFoamposite系列”,這時就需要通過平時運營積累的專業(yè)詞匯可視化同步到開放搜索做查詢語義理解功能的補(bǔ)丁,通過靈活干預(yù)得以解決;
- 跨境電商有時Query涉及“日文、韓文、泰文”等外語,當(dāng)我們的分詞詞典不能很好的分詞優(yōu)化時,也可以通過分詞干預(yù)功能解決;
- 用戶搜索Query“香奈兒氣墊”,默認(rèn)的實體識別,將“香奈兒”歸類為“普通詞”;“氣墊”歸類為“材質(zhì)”,需要人工干預(yù)實體識別,把“香奈兒”干預(yù)為品牌。
6. 搜索引導(dǎo)功能
1)搜索前引導(dǎo)
- 搜索框底紋:根據(jù)用戶近期行為數(shù)據(jù),引導(dǎo)用戶意圖;
- 搜索熱搜榜:實時熱度,引導(dǎo)隨便逛逛的用戶,想知道大家都搜了些什么;
- 搜索熱詞:結(jié)合興趣,給用戶推薦優(yōu)質(zhì)查詢詞。
2)搜索中引導(dǎo)
下拉提示:智能推薦候選query,提高用戶輸入效率,幫助用戶盡快找到想要的內(nèi)容。
五、電商搜索未來趨勢
- 搜索是一個需要持續(xù)輸出優(yōu)化的技術(shù),中腰部電商未來一定會選擇輕運作模式,借助像阿里云、華為云這樣的更專業(yè)的技術(shù)服務(wù)商的搜索技術(shù),把更多資源投入到業(yè)務(wù)創(chuàng)新及研發(fā)上。
- 行業(yè)模板的突破,據(jù)小編所知阿里云的開放搜索技術(shù)已經(jīng)形成電商行業(yè)搜索的專屬模板,這也是基于淘寶天貓多年的行業(yè)經(jīng)驗積累而成,無需開發(fā),數(shù)據(jù)接入即可,產(chǎn)品經(jīng)理和運營人員都可以參與搜索效果的優(yōu)化中來。
- AI與搜索技術(shù)深入融合,AI智能語音搜索、圖片識別搜索目前主要在頭部電商上應(yīng)用,隨時技術(shù)的發(fā)展我相信,這些都會作為主流服務(wù)應(yīng)用在更多電商企業(yè)中,改變更多消費者的消費方式
以上內(nèi)容就是我今天我和大家分享的,希望對你有所幫助,感興趣可以關(guān)注【搜索與推薦技術(shù)】公眾號~
作者:KKai,B端產(chǎn)品運營
本文由 @KKai 原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理,未經(jīng)作者許可,禁止轉(zhuǎn)載。
題圖來自 Pexels,基于 CC0 協(xié)議
本文由 @KKai 原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理,未經(jīng)作者許可,禁止轉(zhuǎn)載。
題圖來自Unsplash,基于CC0協(xié)議。
該文觀點僅代表作者本人,人人都是產(chǎn)品經(jīng)理平臺僅提供信息存儲空間服務(wù)。
作者可以加個微信嗎?文章寫的很好,想要學(xué)習(xí)交流一下
第四大點-第6點-第2小問,能展開講講嗎
第6點中的第2小問,能展開講講嗎
下拉提示可以解決客戶快速輸入問題,還可以根據(jù)用戶行為數(shù)據(jù),分析每一用戶的搜索意圖,潛移默化的提升了購買轉(zhuǎn)化率
大佬你搜了什么亂七八糟的東西
感謝,非常干貨
感謝分享
推薦近期【云棲大會】阿里達(dá)摩院的老師分享的自然語言處理技術(shù)視頻:https://yunqi.aliyun.com/2020/session54?liveId=44650