美攝科技全新發(fā)布汽車圖像與視頻處理方案,締造智能汽車社交新節(jié)點(diǎn)
隨著車輛的普及和硬件的升級(jí),當(dāng)前汽車用戶對(duì)車輛的訴求也從基礎(chǔ)的駕駛代步向追求優(yōu)質(zhì)駕乘體驗(yàn)轉(zhuǎn)變,簡(jiǎn)單的車內(nèi)娛樂(lè)已經(jīng)無(wú)法滿足用戶需求,圍繞汽車的生活內(nèi)容分享變得越來(lái)越重要。美攝科技近日公開(kāi)了專為新一代智能網(wǎng)聯(lián)汽車打造的全鏈路車載影像解決方案,從基礎(chǔ)的圖像增強(qiáng)到AI智能化視頻處理等功能均涵蓋其中,以滿足當(dāng)前日益豐富的多維度車載影像處理需求。
將汽車變成行走的攝影機(jī)這個(gè)想法聽(tīng)起來(lái)很酷,但為了實(shí)現(xiàn)這一目標(biāo)有幾個(gè)問(wèn)題需要解決。與手機(jī)等設(shè)備相比,車載攝像頭拍攝主要存在以下幾個(gè)問(wèn)題:一、車載攝像頭拍攝出的往往是廣角畫(huà)面,在邊緣會(huì)產(chǎn)生畸變現(xiàn)象,導(dǎo)致畫(huà)面內(nèi)容變形;二、車輛在行駛中難免會(huì)產(chǎn)生顛簸,由此帶來(lái)的抖動(dòng)、模糊等問(wèn)題也極大影響畫(huà)面呈現(xiàn)效果;三、由于汽車拍攝到的畫(huà)面通常沒(méi)有后期處理,畫(huà)面效果也往往比較一般。
一、圖像及畫(huà)質(zhì)增強(qiáng)
首先針對(duì)畫(huà)面變形問(wèn)題,美攝汽車圖像及視頻處理方案直接對(duì)攝像頭采集到的畫(huà)面進(jìn)行畸變校正處理,在不損失畫(huà)質(zhì)的前提下,將圖像恢復(fù)為無(wú)畸變的高質(zhì)量拍攝效果。畸變校正可在超低的算力消耗下運(yùn)行,同時(shí)兼容不同攝像頭,只需簡(jiǎn)單標(biāo)定即可完成適配,為車載攝像頭帶來(lái)更接近實(shí)際環(huán)境效果的拍攝效果。
在解決了畫(huà)面變形問(wèn)題后,美攝團(tuán)隊(duì)又在防抖上下足了工夫。通過(guò)算法檢測(cè)視頻抖動(dòng)方向以及畫(huà)面中物體的運(yùn)行軌跡以實(shí)現(xiàn)畫(huà)面穩(wěn)像防抖,同時(shí)通過(guò)去運(yùn)動(dòng)模糊算法消除抖動(dòng)拍攝時(shí)產(chǎn)生的模糊和偽影,整個(gè)算法可搭配在光學(xué)防抖(OIS)或者非光學(xué)防抖(non-OIS)設(shè)備上。
此外,為了彌補(bǔ)車載攝像頭拍攝色彩的不足,美攝團(tuán)隊(duì)推出了智能校色產(chǎn)品,可以對(duì)拍攝圖像進(jìn)行智能分析,動(dòng)態(tài)找出畫(huà)面中存在的過(guò)暗、過(guò)曝、飽和度不佳、清晰度不足等問(wèn)題,并自動(dòng)驅(qū)動(dòng)美攝自研的數(shù)十項(xiàng)圖像調(diào)節(jié)算法對(duì)圖像進(jìn)行實(shí)時(shí)調(diào)優(yōu),一鍵達(dá)成專業(yè)校色效果。
如此一來(lái),影響車載攝像頭拍攝畫(huà)面質(zhì)量的幾大因素都被一一攻克,使用戶借助汽車也可以拍出近似手機(jī)拍攝效果的畫(huà)面。
二、視頻智能創(chuàng)作
單純的拍攝記錄已遠(yuǎn)不能滿足當(dāng)下年輕人樂(lè)于社交分享和追求個(gè)性表達(dá)的喜好,若是將車載攝像頭拍攝的視頻全部導(dǎo)出再由用戶自己進(jìn)行剪輯包裝,不但耗時(shí)耗力,對(duì)沒(méi)有剪輯基礎(chǔ)的用戶來(lái)說(shuō)也十分不友好。
為了解決這一問(wèn)題,美攝研發(fā)團(tuán)隊(duì)將自研的AI智能剪輯產(chǎn)品移植到了車機(jī)之上,讓汽車搖身一變成為視頻包裝的載體。汽車智能剪輯是專為汽車內(nèi)容記錄而生的全新方案,在車輛行進(jìn)過(guò)程中,車載攝像頭會(huì)將實(shí)時(shí)視頻流畫(huà)面以一定時(shí)間間隔傳遞給美攝檢測(cè)SDK,由檢測(cè)SDK對(duì)畫(huà)面進(jìn)行分析處理。錄制結(jié)束后,美攝SDK會(huì)對(duì)保存下來(lái)的本地視頻進(jìn)行讀取,并按一定的幀間隔分析處理,分析完畢后自動(dòng)保存特征文件,提取出其中的精彩片段,智能完成藝術(shù)包裝。期間無(wú)需用戶手動(dòng)操作,即可自動(dòng)生成高質(zhì)量的汽車路書(shū)影片,并支持一鍵分享給社交好友。
對(duì)畫(huà)面內(nèi)容的精準(zhǔn)識(shí)別是實(shí)現(xiàn)智能剪輯的關(guān)鍵因素,美攝龐大的AI標(biāo)簽庫(kù)為智能檢測(cè)提供了強(qiáng)大助力。2000多項(xiàng)AI標(biāo)簽搭配美攝SDK多維度的圖像檢測(cè)能力,讓車機(jī)可以實(shí)現(xiàn)場(chǎng)景識(shí)別、人物識(shí)別、天空識(shí)別、活動(dòng)檢測(cè)、地標(biāo)檢測(cè)等多類別識(shí)別效果,從而實(shí)現(xiàn)實(shí)時(shí)分析畫(huà)面內(nèi)容信息,獲取對(duì)應(yīng)標(biāo)簽,實(shí)現(xiàn)智能剪輯。
AI標(biāo)簽類型
除了在畫(huà)面識(shí)別中大顯身手以外,AI檢測(cè)與車輛信息相結(jié)合還可以產(chǎn)生更具特色的包裝效果,如虛擬天空。在此基礎(chǔ)上,美攝提供配套手機(jī)端視頻編輯聯(lián)動(dòng)方案。在美攝SDK底層能力支持下,車機(jī)端可以與其他端實(shí)現(xiàn)視頻制作工程互通。由車機(jī)端智能剪輯輸出的視頻,可以無(wú)縫銜接至手機(jī)端、Web端、PC端等,供用戶進(jìn)行深度編輯,滿足用戶個(gè)性化出行娛樂(lè)及社交分享需求。
三、車內(nèi)互動(dòng)及娛樂(lè)
開(kāi)車的趣味不止駕駛,基于美攝自研的240點(diǎn)位檢測(cè)方案,車機(jī)座艙可以對(duì)車內(nèi)拍攝畫(huà)面進(jìn)行實(shí)時(shí)美顏美型、添加2D/3D人臉道具、變身Animoji等處理,探索車內(nèi)娛樂(lè)的更多可能。
伴隨著汽車智能化快速發(fā)展,智能座艙不斷升級(jí),語(yǔ)音交互成為最為便捷自然的互動(dòng)方式。傳統(tǒng)車載語(yǔ)音系統(tǒng)是通過(guò)人機(jī)問(wèn)答的方式交流,而美攝實(shí)時(shí)語(yǔ)音數(shù)字人作為當(dāng)前語(yǔ)音交互系統(tǒng)的延伸,則是通過(guò)分析問(wèn)答系統(tǒng)返回的語(yǔ)音內(nèi)容和情景事件,實(shí)時(shí)驅(qū)動(dòng)數(shù)字人播報(bào),并觸發(fā)特定動(dòng)作,由此為駕乘者帶來(lái)更加真實(shí)、更場(chǎng)景化的語(yǔ)音交互服務(wù)。
美攝科技提供完整的數(shù)字人定制服務(wù),包括形象設(shè)計(jì)、動(dòng)作設(shè)計(jì)、動(dòng)畫(huà)創(chuàng)作等全流程,同時(shí)支持服飾妝容自定義,為企業(yè)量身打造專屬數(shù)字人形象。企業(yè)也可以通過(guò)Unity等三維工具自行設(shè)計(jì)人物形象及動(dòng)作,更具靈活性和自主性。整套方案資源占用極低,可在車機(jī)、大屏、手機(jī)等多類型設(shè)備中運(yùn)行,具有良好的兼容性和穩(wěn)定性。
四、AI識(shí)別及處理
作為方案的底層關(guān)鍵技術(shù),多維度的AI圖像檢測(cè)能力賦予了車輛更多人性化功能。如車輛可以實(shí)時(shí)識(shí)別畫(huà)面中的多種內(nèi)容信息,進(jìn)而聯(lián)動(dòng)車機(jī)硬件和圖像引擎完成氛圍燈控制、智能語(yǔ)音提示等各項(xiàng)操作,實(shí)現(xiàn)讓汽車更智能、人車交互更自然的功能進(jìn)化。
基于當(dāng)前的信息安全法規(guī)要求,美攝科技在汽車行業(yè)解決方案中加入了匿名化處理產(chǎn)品。針對(duì)拍攝畫(huà)面中出現(xiàn)的人臉和車牌,可以通過(guò)實(shí)時(shí)處理或后處理的方式將其匿名化,最低可以處理占比面積0.0005%的人臉和0.0002%的車牌畫(huà)面。匿名化處理具備多種處理形式,包含模糊、同色、馬賽克、效果遮擋等。
自美攝科技推出智能汽車圖像及視頻處理方案以來(lái),已與智己汽車等行業(yè)內(nèi)多家頭部主機(jī)廠商達(dá)成合作,并實(shí)現(xiàn)實(shí)車量產(chǎn)。時(shí)至今日,汽車已不再是簡(jiǎn)單的交通工具,而是成為了真正意義上的“第三生活空間”。美攝汽車圖像及視頻處理方案,助力車企為用戶帶來(lái)更具想象力的玩法和多樣化的服務(wù),創(chuàng)造更具品質(zhì)的駕乘空間。