摘要：?2018飛天技術(shù)匯，阿里巴巴機(jī)器智能技術(shù)實(shí)驗(yàn)室的劉磊帶來題為全域精準(zhǔn)圖像搜索介紹的演講，主要從四個方面進(jìn)行了闡述，第一部分介紹了圖像搜索的基本概念，第二部分主要是講解了圖像搜索的技術(shù)架構(gòu)及其優(yōu)勢，第三部分對應(yīng)用場景及案例進(jìn)行了分析，最后對商品使用情況以及定價做了簡單介紹。

2018飛天技術(shù)匯，阿里巴巴機(jī)器智能技術(shù)實(shí)驗(yàn)室的劉磊帶來題為全域精準(zhǔn)圖像搜索介紹的演講，主要從四個方面進(jìn)行了闡述，第一部分介紹了圖像搜索的基本概念，第二部分主要是講解了圖像搜索的技術(shù)架構(gòu)及其優(yōu)勢，第三部分對應(yīng)用場景及案例進(jìn)行了分析，最后對商品使用情況以及定價做了簡單介紹。
數(shù)十款阿里云產(chǎn)品限時折扣中，趕快點(diǎn)擊這里，領(lǐng)券開始云上實(shí)踐吧！
直播視頻回顧
PPT下載請點(diǎn)擊
以下是精彩視頻內(nèi)容整理：

Alibaba MIT

MIT （Machine , Intelligence ,Technologies 機(jī)器智能技術(shù)實(shí)驗(yàn)室） 成立于2018年，由一批杰出的科學(xué)家及工程師組成，團(tuán)隊主要分布在杭州、北京、西雅圖、硅谷、新加坡等地，是阿里巴巴負(fù)責(zé)人工智能技術(shù)研發(fā)的核心團(tuán)隊。MIT以阿里巴巴寶貴的海量數(shù)據(jù)為基礎(chǔ)，機(jī)器學(xué)習(xí)/深度學(xué)習(xí)技術(shù)為依托，打造了涵蓋圖像視頻、語音交互、自然語言理解、智能決策等人工智能核心技術(shù)，充分賦能電商、金融、物流、社交、娛樂等阿里巴巴集團(tuán)的重要業(yè)務(wù)，此外也對生態(tài)合作伙伴輸出，與企業(yè)合力打造智能未來。

圖像搜索

圖像搜索服務(wù)（Image Search）是一個以深度學(xué)習(xí)和大規(guī)模機(jī)器學(xué)習(xí)技術(shù)為核心，通過圖像識別和搜索功能，實(shí)現(xiàn)以圖搜圖的智能圖像搜索的產(chǎn)品。其主要的服務(wù)內(nèi)容包括相同圖像搜索和相似圖像搜索兩部分，在基于圖像識別技術(shù)的基礎(chǔ)上，圖像搜索服務(wù)結(jié)合了不同行業(yè)的應(yīng)用和業(yè)務(wù)場景，幫助用戶實(shí)現(xiàn)相同或相似的圖片搜索。圖像搜索的業(yè)務(wù)領(lǐng)域也較為廣泛，對于所有具備圖像數(shù)據(jù)庫的用戶都可以享受圖像搜索服務(wù)。
圖像搜索發(fā)展歷程主要分為三個階段，在2014年8月成功在淘寶的拍立淘上線，用戶第一次可以通過相機(jī)拍照的方式進(jìn)行購物，在2017年2月開始了產(chǎn)品的對外商業(yè)化輸出，將圖像搜索的技術(shù)分享給各大商業(yè)伙伴，今年開始嘗試將圖像搜索技術(shù)在阿里云上進(jìn)行廣泛的賦能，并在7月份完成了圖像搜索在阿里云以及全球的同步發(fā)布。

技術(shù)架構(gòu)及其優(yōu)勢

圖像搜索技術(shù)主要分為五個算法模塊：

• 類目預(yù)測：僅通過圖片特征進(jìn)行圖片的區(qū)分是有限制的，所以可以通過類目的預(yù)測進(jìn)行目標(biāo)判斷，這樣就無需對整個圖像庫進(jìn)行全局搜索，只需搜索相應(yīng)的某個類目圖片。類目搜索不但可以提升搜索的效率，也可以提升搜索的精準(zhǔn)程度。

• 主體檢測：在一般情況下得到的圖片主體目標(biāo)較小并且背景較為復(fù)雜，為了減少背景以及其他主體的干擾，就需要進(jìn)行主體檢測。

• 特征提取：特征提取是圖像搜索的一個重要模塊，主要應(yīng)用了深度特征與局部特征兩個維度的特征，目前深度學(xué)習(xí)特征提取已經(jīng)遠(yuǎn)遠(yuǎn)優(yōu)于傳統(tǒng)的特征提取。局部特征提取是對圖像特征局部殊性的表達(dá)，目前在局部特征中進(jìn)行了包括維度壓縮、提取速度的優(yōu)化等方面的改進(jìn)。

• 檢索與排序：檢索索引主要分為離線構(gòu)建索引和在線快速查詢兩個模塊，離線構(gòu)建索引是通過離線過程對圖像特征進(jìn)行提取，在線過程主要是通過用戶輸入的特征圖片進(jìn)行快速提取特征，然后把提取出的特征放到分布式引擎中，進(jìn)行快速的查詢檢索。排序模塊能夠有效結(jié)合深度特征與局部特征，深度特征主要從高層來提取信息，而局部特征關(guān)注的是根據(jù)圖像的局部信息。

圖像搜索的技術(shù)流程

離線流程對圖像庫進(jìn)行圖像的選取，對選取后的圖像進(jìn)行主體檢測，然后對檢測后的圖像進(jìn)行特征提取，進(jìn)而建立起圖像檢索引擎。在線流程是在用戶輸入Query時，進(jìn)行類目的預(yù)測和判斷，然后做主體檢測以及特征提取，進(jìn)行檢索和排序后，最后輸出結(jié)果。

圖像檢索的優(yōu)勢

深度學(xué)習(xí)采用業(yè)內(nèi)領(lǐng)先的深度學(xué)習(xí)算法和海量的數(shù)據(jù)，具有效果精準(zhǔn)、魯棒性強(qiáng)等優(yōu)點(diǎn)，并且自主研發(fā)支持百億數(shù)量級別的快速索引技術(shù)，時間可以達(dá)到毫秒級的響應(yīng)，同時產(chǎn)品全都是源于阿里巴巴電商平臺，經(jīng)歷實(shí)戰(zhàn)錘煉，所以具有可靠穩(wěn)定以及效果顯著的優(yōu)點(diǎn)。此外還可以針對不同的業(yè)務(wù)場景做一些定制化開發(fā)，融合阿里云的計算和機(jī)器智能技術(shù)實(shí)驗(yàn)室的視覺AI的能力，打造充分適合用戶全業(yè)務(wù)場景的圖像搜索服務(wù)。

應(yīng)用場景及案例

電商場景

用戶只需拍攝或者上傳照片，就可以根據(jù)圖片進(jìn)行搜索。這省去了繁瑣的文字描述，簡化了商品搜索流程，大大提高了用戶的購物體驗(yàn)，同時對于商家而言也可以更快地將商品推薦給用戶。

通用圖庫場景

圖片分享和社交類網(wǎng)站通常有大量的圖片供用戶搜索使用，利用圖像搜索服務(wù)，可在云端快速構(gòu)建百億級圖像搜索引擎，提供以圖搜圖功能，提升用戶體驗(yàn)。

案例

此案例是在三星Galaxy S8的系統(tǒng)中做了一個圖像搜索技術(shù)，在相冊中可以通過以圖搜圖的方式搜索到淘寶相關(guān)的商品，給客戶提供了更好地購物搜索體驗(yàn)。

商用與定價

圖像搜索已于7月11日在國內(nèi)站和國際站同時商業(yè)化發(fā)布，得到客戶的廣泛好評。目前計費(fèi)方式有兩種，分別是預(yù)付資源包和后付費(fèi)。預(yù)付資源包是在圖像搜索服務(wù)采用購買按月/按年（自然月/自然年）預(yù)付費(fèi)資源包的計費(fèi)方式。在購買后，調(diào)用次數(shù)會在資源包內(nèi)進(jìn)行抵扣，當(dāng)資源包用完時，則默認(rèn)轉(zhuǎn)到后付費(fèi)方式。同時預(yù)付費(fèi)資源包采取按照資源包調(diào)用量大小及資源包購買期長短進(jìn)行階梯優(yōu)惠的付費(fèi)方式，資源包的調(diào)用量越大/資源包的購買期越長（如：選擇包年而非包月）即單價越低。而后付費(fèi)是在圖像搜索服務(wù)的預(yù)付費(fèi)資源包用完后，默認(rèn)轉(zhuǎn)到后付費(fèi)方式，后付費(fèi)的計費(fèi)方式為按次計費(fèi)。

閱讀原文

本文為云棲社區(qū)原創(chuàng)內(nèi)容，未經(jīng)允許不得轉(zhuǎn)載。