機器學習+NLP+VR：重塑二手車買車新場景

現(xiàn)階段，多方面的車輛信息已實現(xiàn)了物理層面上的集成，但在語義內(nèi)容的解析和信息的視覺呈現(xiàn)上還有待深入研究。用戶需要親自閱讀碰撞、維保、電池報告來理解其中的內(nèi)容，報告內(nèi)容的豐富性、專業(yè)性與可讀性將對用戶的交易決策產(chǎn)生重要影響。例如，用戶瀏覽APP時被汽車外觀、內(nèi)飾的照片所吸引，卻可能因不了解汽車車體結(jié)構(gòu)和車況排查標準而無法準確理解相應的碰撞、維保、電池報告中所包含的眾多內(nèi)容，最終導致交易轉(zhuǎn)化失敗。
為推動車況信息的透明化，汽車之家二手車不斷完善優(yōu)化“車史檔案”，使二手車出險記錄查得率達到98%、維保記錄查得率達到85%，同時還有天天拍車平臺開展線下檢測業(yè)務(wù)，獲取真實的車況數(shù)據(jù)完善檔案數(shù)據(jù)。傳統(tǒng)二手車買車場景 VS 數(shù)字化二手車買車場景
通過利用數(shù)字能力和數(shù)據(jù)資源不斷推動車況信息的透明化、標準化，使用戶更易了解車況信息，提高用戶決策效率和線索轉(zhuǎn)化效率。具體來說，結(jié)合機器學習、自然語言處理和VR全景等技術(shù)，我們重塑了二手車購買的業(yè)務(wù)場景，將二手車車源在估值、車史、VR全景展示三個維度的信息進行了集成與融合，以交互式可視化的形式呈現(xiàn)給用戶，使用戶更快捷、直觀、詳盡了解二手車車源的車況和估值，降低用戶的信息搜尋成本和信息理解成本，促進用戶做出交易決策。圖1 傳統(tǒng)二手車買車場景和數(shù)字化二手車買車場景對比如圖1所示，傳統(tǒng)的二手車交易需要用戶在不充分了解車輛信息的情況下與二手車商預約線下看車，再根據(jù)看車人的經(jīng)驗知識做出主觀的評斷。而數(shù)字化的二手車買車業(yè)務(wù)則是用戶直接通過PC、APP從云端獲取標準化的車輛信息，充分了解車輛信息、評估后再決定是否線下看車，有效提高線下看車的效率。汽車之家二手車在為用戶創(chuàng)造數(shù)字化體驗的過程中，除了促進購車交易，也提高了買車新模式的商業(yè)增長。

買車新模式：結(jié)構(gòu)化數(shù)據(jù)+半結(jié)構(gòu)化數(shù)據(jù)+全景數(shù)據(jù)圖2 二手車買車業(yè)務(wù)架構(gòu) 二手車買車業(yè)務(wù)流程架構(gòu)如圖2所示。結(jié)構(gòu)化的數(shù)據(jù)來自從汽車之家二手車交易平臺中的二手車的車輛數(shù)據(jù)、交易記錄等數(shù)據(jù)。其中，二手車的車輛數(shù)據(jù)中包括省份、城市、車型、上牌時間、行駛里程、發(fā)布時間、過戶次數(shù)等各種數(shù)據(jù)，二手車交易記錄中包括成交價格、交易類型、檢測車況等數(shù)據(jù)。這些結(jié)構(gòu)化的數(shù)據(jù)按用于估值模型的訓練，預測車輛在當前及未來的價格趨勢。
半結(jié)構(gòu)化的數(shù)據(jù)是指從第三方獲取的車輛出險記錄，4S店維修保養(yǎng)記錄、天天拍線下檢測記錄以及電池數(shù)據(jù)記錄，這些記錄具有多種數(shù)據(jù)類型，需要轉(zhuǎn)化為統(tǒng)一的數(shù)據(jù)格式，解析其中的語義內(nèi)容，抽取結(jié)構(gòu)化的信息。對于新能源車的電池數(shù)據(jù)經(jīng)過加工解析生成電池在線檢測報告，綜合得出維保、碰撞、電池等多維度的車史報告。
全景數(shù)據(jù)是指通過VR外觀相機和VR內(nèi)飾相機所拍攝的原始圖像數(shù)據(jù)，原始圖像數(shù)據(jù)經(jīng)過VR拍攝組件生成VR圖片，再通過APP、H5端的VR播放組件進行展示。從非結(jié)構(gòu)化數(shù)據(jù)中抽取出的結(jié)構(gòu)化信息除了形成車史報告，也可以與VR中圖像進行跨模態(tài)的語義對齊，例如車史報告中如提到“左前門碰撞”，則可以在VR展示中提示出左前門的狀態(tài)異常。估值、車史和VR展示將共同呈現(xiàn)于用戶界面。當用戶瀏覽通過PC、APP瀏覽二手車車源詳情時，可在用戶界面查看車輛估值信息，查詢車史報告，VR全景看車，從價值、車況、外觀內(nèi)飾三個角度來評估車輛是否符合需求，決定是否購買或留下購車線索。

技術(shù)實現(xiàn)難點估值：車輛的數(shù)據(jù)十分復雜，通常包括了區(qū)域、車齡、里程數(shù)、車型、車系、外觀、內(nèi)飾、車況等多達上百維的特征信息，并且這些特征存在著數(shù)據(jù)的部分缺失或特征間多重共線性的復雜關(guān)系，給二手車價格的預測模型帶來三大挑戰(zhàn)：模型預測的準確率、模型推理的計算效率、模型的可解釋性。雖然現(xiàn)有的機器學習技術(shù)如神經(jīng)網(wǎng)絡(luò)或梯度提升樹模型可以端到端地處理復雜特征，但車輛特征數(shù)據(jù)的復雜性使得此類方法不適合用于二手車價格的預測，已有的二手車估值模型準確率較低。為解決上述三個問題，本估值模型采用了分而治之的思路，將車源按照省份、城市和車型分組，再將分組后的車源數(shù)據(jù)中與時間相關(guān)的數(shù)據(jù)進行量化處理，根據(jù)相關(guān)性篩選特征，訓練多元線性回歸模型。VR全景：現(xiàn)有的VR外觀技術(shù)方案是采用單反相機+長焦鏡頭拍攝，在自帶轉(zhuǎn)盤的影棚內(nèi)進行車輛外觀的360°拍攝；或采用單反相機+魚眼鏡頭拍攝，車內(nèi)使用單反進行4面拍攝，然后采用人工后期處理的方式完成全景360°圖像的生成。缺點在于單反+影棚+轉(zhuǎn)盤造價高，條件苛刻，拍攝車輛需要專人負責運輸，效率低，后期圖像處理繁瑣，產(chǎn)出一輛車的外觀+內(nèi)飾圖片過程長，對于人員專業(yè)度要求苛刻。而通過手機APP引導拍攝+后期人工處理的方法所得圖像不夠精準，后期人工處理耗時長。二手車VR看車全新設(shè)計研發(fā)了基于模型、車輛輪廓識別、陀螺儀、磁場傳感器綜合性的對被攝車輛和場地進行計算，給拍攝者提供便捷的定位拍攝方案。車史檔案：維修保養(yǎng)記錄、碰撞記錄和電池充放電記錄的數(shù)據(jù)也同樣面臨著數(shù)據(jù)維度巨大、數(shù)據(jù)質(zhì)量不一、缺乏規(guī)范化的問題。比如維保記錄和碰撞記錄，有著多種形式的數(shù)據(jù)來源，既有半結(jié)構(gòu)化的記錄表單，也有記錄文檔，甚至還有拍攝或掃描的文檔圖像，需要對這些數(shù)據(jù)源進行加工處理，規(guī)范為統(tǒng)一格式的數(shù)據(jù)形式。在車況信息的抽取過程中，需要根據(jù)領(lǐng)域?qū)＜抑R明確需要抽取的信息類型，建立車況評估和電池狀況評估的知識模型以及相應的標準化術(shù)語詞表，建立車況和電池的評分、評級模型。
實現(xiàn)方法

• 估值

圖3 估值模型 對車輛進行估價，是二手車交易的重要環(huán)節(jié)，在交易過程中，需要根據(jù)車輛信息對二手車進行評估定價，獲得較為準確估價區(qū)間。目前，我們基于汽車之家的二手車車源數(shù)據(jù)研發(fā)了一種車輛估價模型,來滿足商家、用戶對二手車車源價格的評估。
我們的車輛估價模型主要使用的車源數(shù)據(jù)包括：地理區(qū)域、車型、行駛里程、上牌時間、發(fā)布車輛時間等，首選我們需要車源數(shù)據(jù)中提取地理區(qū)域和車型，并按照地理區(qū)域、車型對車源數(shù)據(jù)中的其他維度數(shù)據(jù)進行分組，得到分組數(shù)據(jù)，再將分組后的車源數(shù)據(jù)中與時間相關(guān)的數(shù)據(jù)進行量化處理，處理后的各組車源數(shù)據(jù)作為訓練數(shù)據(jù)，訓練多元線性回歸模型，模型定義如下：
其中，Y為估價，θ0為截距，變量t1為上牌時間，變量t2為行駛里程，變量t3為用戶發(fā)布車輛信息時間，θ1、θ2、θ3為對應的回歸系數(shù)。
表1 不同地理區(qū)域、不同車型對應估計模型的截距與回歸系數(shù)構(gòu)建多個針對各個地理區(qū)域下的、不同車型的車輛估價模型，即每個省份對應多個車輛估價模型，每個省份、城市、車型下對應一個車輛估值模型。由于不同省份、車型的車輛價格存在一定的差異，因此針對不同地理區(qū)域、車型訓練不同的估值模型，可以有效減少預測誤差，使模型估計的準確性更高。得到針對各個地理區(qū)域下的、不同車型的截距與回歸系數(shù)。

圖4 根據(jù)信息預測估值&歷史成交和建議因此，本估值模型本質(zhì)上是一個集成模型，頂層是按省份、城市和車型進行的分類模型，底層是對應類別的多個預測模型。當利用訓練得到的車輛估價模型進行估價時，首先根據(jù)從客戶端獲取的地理區(qū)域、車型，選擇與地理區(qū)域、車型相對應的車輛估價模型，再將從客戶端獲取的上牌時間、用戶發(fā)布車輛信息時間、行駛里程輸入以選取的模型，模型輸出對應的高準確性的車輛估價。

• VR全景

在VR技術(shù)逐漸普及，可為用戶提供新穎的內(nèi)容展現(xiàn)形式的背景下。因二手車一車一況，通過VR技術(shù)采集商家各輛車的內(nèi)外圖像數(shù)據(jù)，隨車輛信息發(fā)布以后，可為用戶提供更加直觀、真實的車輛狀況展示，線上車源360°展現(xiàn)，外觀、內(nèi)飾無死角細節(jié)瀏覽，提升瀏覽體驗。提高用戶決策及線索轉(zhuǎn)化，提升到店轉(zhuǎn)化率 。同時也為商家提供了高質(zhì)線索和用戶到店率。  圖5  VR全景拍攝技術(shù)流程拍攝方案：載入用戶選擇的對應年代款的車輛模型圖30張，一套360°外觀圖需要拍攝30張不同角度的照片，以車輛為圓心，12°為一個點，進行站位點劃分，站位點與模型圖角度進行強關(guān)聯(lián)，每張圖對應到一個站位點。使用手機內(nèi)置陀螺儀+電子羅盤，經(jīng)過計算可為拍攝者提供精準的角度位置信息，供拍攝者參考自身占位是否與模型圖匹配；通過圖像輪廓實時識別能力，為拍攝者提供精準的距離指引，免除人工丈量設(shè)置拍攝點位的繁瑣步驟；當拍攝者按下拍攝按鈕后，程序?qū)ε臄z的圖片進行分析識別，保留車輛輪廓內(nèi)的車輛清晰圖片，對輪廓外的背景區(qū)域進行20%的高斯模糊圖層生成，并對邊緣進行羽化處理，拼合所有圖層，得到最終的一個角度的外觀圖。本外觀拍攝方案，簡化了人工圖像處理步驟，通過智能識別算法，全自動生成預期的車輛清晰背景虛化的外觀圖片，極大地簡化了車輛外觀360°的拍攝流程，10分鐘內(nèi)即可完成外觀和內(nèi)飾拍攝，并直接上傳平臺展示。圖6 VR全景多平臺一體化集成方案適配多端拍看一體化技術(shù)方案(手機App拍攝 + App雙端VR播放組件 + H5VR播放組件):  1. 自研手機360°VR外觀拍攝App組件；2. 自研集成化內(nèi)飾VR拍攝組件, 支持多品牌VR相機連接拍攝；3. 自研App原生外觀播放器控件；4. 基于ThreeSixty二次研發(fā)的外觀H5播放器; 5. 基于Kpano的內(nèi)飾360°H5內(nèi)飾播放器。

• 車史檔案
  

圖7 車史報告生成圖8 部分車史報告示例圖9 部分電池報告示例車輛出險記錄，4S店維修保養(yǎng)記錄和天天拍線下檢測記錄數(shù)據(jù)形式多樣，部分圖片數(shù)據(jù)需要先通過OCR轉(zhuǎn)換為統(tǒng)一的文檔格式，再從文檔中抽取結(jié)構(gòu)化的信息。首先建立車況評估和電池狀況評估的知識模型以及相應的標準化術(shù)語詞表，解決了哪些信息需要被抽取，信息彼此之間的關(guān)系是什么，信息該如何利用的問題。具體來說，NLP模型抽取出時間信息，里程數(shù)、維修/理賠金額等數(shù)量信息，實體信息（汽車關(guān)鍵部位，如A柱、B柱等）及相應的方位詞（如正前方、前方左側(cè)等）和動詞（如切割、鈑金、焊接等），并根據(jù)句法標注建立實體、方位詞和動詞之間的關(guān)系，構(gòu)成形如“左-A柱-焊接”的語義短語，這樣的語義短語是描述車輛碰撞維修歷史的最小語義單元。由于原始記錄的不規(guī)范或OCR識別過程中的誤差，記錄文檔對汽車關(guān)鍵部位的描述可能不夠準確或不夠完整，還需要依據(jù)預先建立的標準關(guān)鍵部位名詞詞表、動詞詞表、方位詞詞表進行規(guī)范化處理，得到標準化的關(guān)鍵部位名詞、動詞，以及相應的語義短語。

圖10 車況排查分類的知識模型 & 圖11：車史報告與VR圖像的語義對齊根據(jù)檢測部位和事件類型，將車況排查分為骨架排查、加強件排查、水泡排查、火燒排查、里程排查、外觀部件、變速箱/發(fā)動機排查、安全氣囊排查8大維度。其中外觀部件的排查信息可以與VR圖像建立語義上的對齊，進而在VR層面進行視覺上的呈現(xiàn)。根據(jù)標準化的關(guān)鍵部位名詞與動詞關(guān)系，制定了不同維度的車況評級規(guī)則，將抽取出的標準化語義短語映射為“ABCD”四個等級評級，最后綜合8個維度的評級和車輛的出險記錄、理賠金額、新車指導價格等信息對車況做出綜合的評估，分為“優(yōu)、良、中、差”四個等級。從抽取的語義短語、事件和數(shù)量信息生成車輛的碰撞歷史明細、維修保養(yǎng)歷史明細和歷史里程明細。
隨著新能源汽車市場的迅猛發(fā)展，汽車之家二手車也積累了數(shù)萬的新能源車源車主和對新能源車源有買車欲望的用戶。除了獲取車輛的維保、碰撞、里程車史，新能源車用戶還對電池性能和電池續(xù)航能力的評估有著強烈需求。為此，二手車聯(lián)合北理新源，利用新能源車電池大數(shù)據(jù)打造了新能源二手車智能車況云平臺，將電池數(shù)據(jù)進行加工處理和評級，在汽車之家、二手車之家等相關(guān)產(chǎn)品上一鍵生成新能源電池一站式在線檢測報告，實現(xiàn)電池性能實時評估和續(xù)航里程在線檢測。
電池檢測報告記錄了電池出廠數(shù)據(jù)，并對電池評估數(shù)據(jù)、充放電數(shù)據(jù)、行駛數(shù)據(jù)和異常情況數(shù)據(jù)進行綜合排查評估電池性能，計算出參考續(xù)航里程。綜合解析以上維度的數(shù)據(jù)，構(gòu)建了電池狀況評分和評級模型，預測電池性能的評分并按照評分劃分為優(yōu)、良、中、差四個等級。

結(jié)語

針對二手車車輛數(shù)據(jù)和視覺展示進行了深度探究，我們建立了標準化的數(shù)據(jù)處理加工流程、方法模型以及可視化展示形式。面對海量的復雜的車輛數(shù)據(jù)，以分治思想建立估值的集成模型，極大提高了估值的準確性，使用戶能夠準確了解當前車輛的價值；建立標準化的車史知識模型，通過算法模型和規(guī)則方法將碰撞、維保、電池的信息結(jié)構(gòu)化，特別是新能源車電池在線檢測報告，在業(yè)內(nèi)處于創(chuàng)新領(lǐng)導地位。在視覺展示層面，創(chuàng)新地利用軟件技術(shù)解決了傳統(tǒng)VR技術(shù)過于依賴硬件和人力導致的成本偏高，時間偏長的問題，使商家能夠輕松地拍攝360°全景影像，提升購車用戶的瀏覽體驗。三個維度的信息經(jīng)過數(shù)字技術(shù)解析并集成融合，重塑了二手車買車的業(yè)務(wù)數(shù)字化場景。二手車買車業(yè)務(wù)是我們二手車非常關(guān)鍵的業(yè)務(wù)線，在用戶做出交易決策的過程中，可信且完善的車輛信息以及信息與用戶的交互起到至關(guān)重要的作用。汽車之家二手車的愿景是持續(xù)推動業(yè)務(wù)的數(shù)字化轉(zhuǎn)型，打造二手車流通的全數(shù)字化系統(tǒng)，實現(xiàn)非標商品標準化，過程透明化，建立起一套賦能二手車行業(yè)數(shù)字化轉(zhuǎn)型的新模式。