2017年3月，歐洲Euro-NCAP（安全評鑒協(xié)會）發(fā)布了新一系列包擴(kuò)奧迪、豐田、路虎等在內(nèi)的車型的碰撞測試結(jié)果，其中路虎的發(fā)現(xiàn)車型獲得了五星。獲得五星的路虎車型，搭載的主動安全系統(tǒng)中，前向采用了雙目攝像頭的方案，而這個方案也成為了它能脫穎而出的關(guān)鍵。

作為汽車主動安全系統(tǒng)的一個重要傳感器，攝像頭已經(jīng)在業(yè)內(nèi)成名許久。聲明卓著的Mobileye用十余年的時(shí)間將單目的性能發(fā)揮到了極致，被英特爾153億美金收購后更是成為了單目寡頭。敢于同其直面競爭者寥寥無幾，于是乎鮮有的幾家初創(chuàng)公司，選擇了從雙目的方案開始切入。

雙目系統(tǒng)的原理跟單目完全不同，需要的技術(shù)積累和克服的難點(diǎn)也不同。在新的賽道上，同業(yè)者不多，國外博世、大陸等廠商雖早有發(fā)力，但性能一般，而國內(nèi)更是屈指可數(shù)。

成立于2017年的元橡科技，算是一家低調(diào)又少數(shù)的雙目立體攝像頭的軟硬件一體方案商。公司團(tuán)隊(duì)雖小，但核心成員都有豐富的研發(fā)經(jīng)驗(yàn)，產(chǎn)品性能優(yōu)異。

雙目方案需要神同步

2015年前后，國內(nèi)ADAS市場迎來了一個高潮期，各種ADAS掛名的公司如雨后春筍般野蠻生長了起來。元橡科技創(chuàng)始人發(fā)現(xiàn)ADAS雖熱，但核心的視覺傳感器能力還是差強(qiáng)人意，于是便萌生了出來創(chuàng)業(yè)的念頭。

在計(jì)算機(jī)視覺領(lǐng)域摸爬滾打了十余年的元橡科技創(chuàng)業(yè)團(tuán)隊(duì)，對攝像頭的軟硬件技術(shù)都熟捻于心。他們認(rèn)識到在單目攝像頭的方案方面跟頭部競爭者有太多距離，一時(shí)難以追趕。

而在雙目方面，由于技術(shù)路線的不同，還有較大機(jī)會和空間。至此，自創(chuàng)立之初，元橡科技團(tuán)隊(duì)就載著做雙目視覺方案的世界佼佼者的愿景，順著軟硬件一體化的道路向前走。

雙目跟單目最大的區(qū)別是，前者需要軟硬件的聯(lián)合優(yōu)化，這也是為什么公司要做軟硬件一體的解決方案商。

雙目攝像頭的方案，CMOS融合圖像數(shù)據(jù)需要相匹配的ISP處理，現(xiàn)有的ISP方案都是針對單目的，不太適合做雙目的處理，所以元橡科技從ISP這個硬骨頭開始啃，爭取在相機(jī)的每個處理單元做到最優(yōu)。

立體視覺的一個難點(diǎn)就是相機(jī)的同步問題。立體測量距離的基本原理是三角測量，用兩個攝像頭拍同一個景，通過圖像的差異來測量距離。

而為了達(dá)到這一效果，首先兩個攝像頭要做到同步。圖像的每一幀本身會因?yàn)闀r(shí)間的變化和外部環(huán)境的變化存在差異，而雙目測距的原理正是通過相同場景的不同視角來得出的，如果兩個相機(jī)在拍攝的時(shí)候不能達(dá)到同步，那么就會造成測距的源參照物發(fā)生錯位，造成的連鎖誤差也是不可逆的。利用雙目攝像頭測距的原理得出的結(jié)果，也就本質(zhì)上錯了。

立體視覺的另外一個難點(diǎn)就是兩個相機(jī)的一致性問題，就像天下沒有兩片相同的葉子，哪怕是工業(yè)流水線上生產(chǎn)出來的相機(jī)，也存在一定的差異性。

因此，為了使得立體相機(jī)達(dá)到同步拍攝，系統(tǒng)的軟件結(jié)構(gòu)、運(yùn)行機(jī)制都需要進(jìn)行軟硬件調(diào)整，才能達(dá)到統(tǒng)一性。

市場上大部分宣傳能夠達(dá)到同步效果的，實(shí)際上還是用原有的ISP來做，但原來的ISP實(shí)際上是針對單目相機(jī)設(shè)計(jì)的，控制只能達(dá)到幀級別。元橡科技基于自身的技術(shù)，目前可以達(dá)到像素級別的對齊，這種技術(shù)在業(yè)內(nèi)也屬領(lǐng)先。

用數(shù)據(jù)說話

雙目相機(jī)有一個非常關(guān)鍵的參數(shù)——Baseline，即兩個攝像頭之間的距離。距離越小，結(jié)構(gòu)穩(wěn)定性越好；但同時(shí)越小的間距，測量相同距離的難度也會越高。

雙目攝像頭在汽車上使用的環(huán)境非常惡劣，不僅要承受巨大的溫差變化，暴曬雨淋冰凍，還需要經(jīng)受常年累月的顛簸。

由于雙目攝像頭測距的原理是三角測距原理，因此作為三角測量標(biāo)準(zhǔn)尺的底邊——攝像頭之間的相對位置是不能發(fā)生改變的，否則結(jié)果將會是錯的。產(chǎn)品結(jié)構(gòu)的穩(wěn)定性是隨著攝像頭間距的增大呈指數(shù)級別增加的，為此，保持雙目攝像頭結(jié)構(gòu)的穩(wěn)定性就成了頂要緊的事。

而間距越小，準(zhǔn)確測距的難度就越大。這對于雙目攝像頭的發(fā)展而言是一個矛盾的存在。

元橡科技目前可以做到小于10cm的Baseline下，測距范圍達(dá)到100米，精度達(dá)到95%以上，測距性能指標(biāo)是業(yè)內(nèi)其他已知競爭對手的兩倍左右。高性能、小尺寸、低成本是公司產(chǎn)品的優(yōu)勢。

正如之前《高工智能汽車》寫的一篇文章中所述（點(diǎn)擊瀏覽ADAS單目/雙目/三目到底有什么區(qū)別？），雙目測距的方案對于兩個攝像頭的一致性要求非常高。但元橡科技使用的鏡頭，只是一般的鏡頭，并沒有采用很高的規(guī)格，國內(nèi)舜宇，歐菲光生產(chǎn)的都可以使用。這是因?yàn)樵鹂萍纪ㄟ^自身的圖像矯正算法，可以消除掉攝像頭差異帶來的問題。

這種技術(shù)得益于他們在日企中工作的經(jīng)驗(yàn)，日本在精密制造領(lǐng)域擁有相當(dāng)?shù)膶?shí)力。在以往的工作經(jīng)驗(yàn)中，并不會尋找品質(zhì)最好的鏡頭，因?yàn)椴焕诖笠?guī)模產(chǎn)品化，于是在通用的鏡頭中尋找一致性較好的兩枚攝像頭，然后通過軟件算法的調(diào)教，消除差異。5%-10%的畸變誤差都會刷掉大部分日本生產(chǎn)廠商。

鏡頭的安裝是一片片鏡片層層疊加在一塊，公司花了很大的精力去做非一致性的容忍。從30度到90度的鏡頭，都可以支持。另外廣角的非球面鏡片本身生產(chǎn)就有很大的難度，但團(tuán)隊(duì)現(xiàn)在的技術(shù)也已經(jīng)可以達(dá)到要求。

元橡科技核心人員透露，能攻克這些技術(shù)難關(guān)，需要耐心和靜心，它是一個基礎(chǔ)的研究，但國內(nèi)的環(huán)境整體較為浮躁，個中不僅僅是后端算法的彌補(bǔ)，還需要硬件層面的調(diào)整，少有團(tuán)隊(duì)能沉下心來做事情。

單雙目的失真

單目跟雙目本身存在功能性上的不同，雙目是用來測距，單目是用來識別。簡而言之，雙目是在單目的基礎(chǔ)上加了一維深度信息。

單目是2D的，真實(shí)的世界是3D的，因此單目拍出來的2D照片失去了現(xiàn)實(shí)世界一個維度的信息，這個缺失的信息對于車載又是至關(guān)重要的。

為了接近真實(shí)環(huán)境，單目需要通過其他的信息來彌補(bǔ)缺失的另一維度的信息。這就是單目方案需要大量樣本庫的原因，單目需要首先識別物體，然后才能通過成像尺寸或者在圖像中的位置信息得到距離信息。無論是深度學(xué)習(xí)，還是傳統(tǒng)的方式，都是在補(bǔ)缺失去的信息。

單目的工作原理造成它常常會存在漏檢的情況，對于陌生的障礙物無法識別，這時(shí)候會直接導(dǎo)致事故。ADAS層級越高，視覺必須要得到距離來補(bǔ)充，才能得到一個完備的結(jié)果。

而雙目實(shí)際上是一個2.5D的傳感器，攝像頭拍攝的圖像是2維的，雙目測距獲得的距離信息是一個0.5維度（無法獲取障礙物背部的信息），因此通常將雙目稱為2.5維的傳感器。

雙目做ADAS不需要樣本庫，測距直接通過簡單的規(guī)則——將路面以及周圍突出的物體都視為障礙物，整個算法是全白盒化的，不會存在識別不到的問題。而且一旦出現(xiàn)問題，就可以直接找到原因，不會像單目深度學(xué)習(xí)算法是黑盒的邏輯。當(dāng)然雙目能夠得到這樣的結(jié)果，一切都是建立在準(zhǔn)確獲取測距結(jié)果的基礎(chǔ)上的。

單目的核心是數(shù)據(jù)庫和算法的，但雙目是需要聯(lián)合優(yōu)化，立體匹配，兩個相機(jī)的一致性，整個的優(yōu)化流程都不一樣。博世的長期研發(fā)的團(tuán)隊(duì)有數(shù)十人之多，但技術(shù)水平并沒有提高太大。

優(yōu)化難度之所以較大，是因?yàn)殡p目的優(yōu)化需要軟硬件同時(shí)進(jìn)行，而且本質(zhì)上而言硬件的優(yōu)化是重中之重。

因此對于調(diào)校的工程師而言，需具備硬件工程師的思維，只有這樣，才能讓硬件發(fā)揮到極致性能。能達(dá)到這些要求的工程師，業(yè)內(nèi)給了一個稱號：全棧工程師，他們在國內(nèi)非常稀少。

這些人才需要在軟硬件方面都具備一定的知識儲備，在光學(xué)成像、軟件算法、硬件電路方面都得有所涉足，因此人才較為稀缺。

元橡科技的核心技術(shù)人員，已經(jīng)有超過5年的團(tuán)隊(duì)工作經(jīng)驗(yàn)，因此相互協(xié)調(diào)工作已經(jīng)有了很大的默契。加上行業(yè)經(jīng)驗(yàn)，才能迅速的將產(chǎn)品更完善的展現(xiàn)出來。

元橡科技新招募的工程師很多都是從名校畢業(yè)的應(yīng)屆畢業(yè)生，學(xué)歷至少為碩士。這些人才需要既懂硬件，又懂軟件。

他們大部分的背景是做視覺、芯片邏輯的，剛開始公司并不會急于員工進(jìn)行開發(fā)，產(chǎn)生效益。而是會培養(yǎng)員工的各方面能力，只有這樣，才會使得新來的員工在后續(xù)的研發(fā)過程中，自然而然的具備合適的思維模式。

立體相機(jī)為何物？

立體相機(jī)并不是形態(tài)上必須是雙目或者多目，而是它所拍攝出來的圖片一定要經(jīng)過立體的匹配，點(diǎn)對點(diǎn)的匹配和優(yōu)化，最終得到一個稠密的視差圖，或者說深度圖。整個過程需要性能強(qiáng)大的處理器完成，沒有這個過程，是不能稱之為立體相機(jī)的。

三目的立體相機(jī)和三目成像相機(jī)也是有不同的。三個不同F(xiàn)OV的攝像頭，沒有立體匹配，就不能稱之為立體相機(jī)。原來的車載攝像頭分辨率有限，因此三目成像相機(jī)本質(zhì)上是一個二維相機(jī)，跟單目原理一樣，只是為了覆蓋更遠(yuǎn)的距離，更廣的角度。

特斯拉曾想通過三目立體相機(jī)的原理，測算出距離。就是通過不同視差角的攝像頭拍攝圖像的重疊區(qū)差異性，計(jì)算得出障礙物距離。但是這種技術(shù)本身存在一個較大的技術(shù)難點(diǎn)，就是不同廣角的鏡頭拍照以及曝光的時(shí)間不同，兩個攝像頭拍照的時(shí)候成像的相同的位置時(shí)間是不一樣的，很難保證同步。

舉例來說，攝像頭長焦的和廣角的某一行像素點(diǎn)是同時(shí)曝光的，但其中只有少數(shù)幾個像素點(diǎn)能達(dá)到時(shí)間的絕對同步。剩下的大部分像素點(diǎn)曝光時(shí)間都不在一個時(shí)間點(diǎn)上。

這種微小的差異在高速運(yùn)動中就會被放大，也就造成了雙目測距距離不遠(yuǎn)的原因。所謂差之毫厘謬以千里，說的就是這個道理。

為了解決這個問題，在當(dāng)前的技術(shù)條件下，除非CMOS廠家做一些工藝上的特殊處理，比如讓人們可以控制每一個像素點(diǎn)的曝光時(shí)間，但實(shí)現(xiàn)的難度比較大。

因?yàn)閲H上知名的CMOS廠商都是巨頭，如索尼、三星等，他們的業(yè)務(wù)在車載領(lǐng)域占比較小，而作為已經(jīng)成熟的標(biāo)準(zhǔn)的工藝，是很難為一些企業(yè)做出調(diào)整、修改，明星如特斯拉都不行。

因此現(xiàn)階段而言，三目想要做成立體相機(jī)是很難的，短距離測距可能會有，但意義并不是很大。這也是特斯拉后來為什么放棄做三目攝像頭（Mobileye提供技術(shù)支持）的主要原因。

在現(xiàn)有的基礎(chǔ)上，為了實(shí)現(xiàn)類似的三目效果，可行的方式是通過多個雙目相機(jī)實(shí)現(xiàn)，比如現(xiàn)在元橡科技就在嘗試做四目甚至六目的相機(jī)來實(shí)現(xiàn)不同測距范圍的多角度覆蓋，將雙目當(dāng)做單目來用。

雙目需要FPGA來做

視覺方案不可避免的要用到高性能的處理器，但NVIDIA的三高處理器并不適合，F(xiàn)PGA的方案才是可取之道。

一般算法驗(yàn)證會在PC上用GPU來做，但做產(chǎn)品化并不會用GPU的方案。這與平臺的適應(yīng)性有關(guān)，一般來講，端上智能更適合用FPGA、芯片的方式，它需要完成大量高速的重復(fù)運(yùn)算，最好是用高計(jì)算能力的專用芯片完成。

類似于NVIDIA的方案，實(shí)現(xiàn)一個通用計(jì)算平臺，功耗大，即使是降到現(xiàn)在宣稱的15W，如果沒有主動散熱系統(tǒng)，還是很難正常工作的。NVIDIA的方案，更適合多傳感器融合、無人駕駛大腦的場景。

之所以有些公司會嘗試用GPU的方案，是因?yàn)镚PU 的開發(fā)相對簡單一些，大部分通過原有的C語言修改就可以使用。

元橡科技的FPGA已經(jīng)迭代了好幾代，技術(shù)成熟需要走過無數(shù)的坑，沒有誰可以輕松跨過。

雙目的攝像頭是一個天然融合的傳感器，它將深度學(xué)習(xí)和圖像學(xué)習(xí)糅合，使得后續(xù)的處理速度會非?？?。

元橡科技使用FPGA的方式，將傳感器深度圖像生成的時(shí)間壓縮到了毫秒級別，這意味著處理解析圖像數(shù)據(jù)，得出結(jié)果幾乎是實(shí)時(shí)的，給控制決策部分留下了非常充裕的時(shí)間。

傳統(tǒng)的GPU的方案，在處理圖像前，首先得將圖像緩存，這個時(shí)間大概會花費(fèi)30ms左右的時(shí)間，之后完成圖像的特征提取。因此縱使GPU的計(jì)算能力再強(qiáng)，但前面的緩存時(shí)間是沒有辦法忽略掉的。

而用FPGA的方案，則用時(shí)會很少，當(dāng)圖片在從一個像素一個像素生成的過程中，就可以通過有限的幾個像素點(diǎn)計(jì)算對比出差異，提交給處理器得出計(jì)算結(jié)果。整個過程是幾乎實(shí)時(shí)完成的，為中央處理器做控制、決策留出了充沛的時(shí)間。

這也是為什么在NCAP的評比中，路虎的雙目方案可以獲得滿分的原因。這里面有一個核心的問題——系統(tǒng)的復(fù)雜性造成延時(shí)性不一樣。

雙目的趨勢

奔馳2016年前只在S系的車型中試驗(yàn)了雙目，但到了2017年的時(shí)候，其銷量最廣的E系列車型，都已經(jīng)標(biāo)配了雙目。

后來寶馬的5系也跟上了，而路虎走的更為激進(jìn)。前視傳感器中將雷達(dá)去掉，只用雙目的方案（但是它還是憑借單一傳感器拿到了N-CAP的第一名，英國當(dāng)年的最佳安全車型獎）。

雙目能夠取得很好的效果，已經(jīng)得到了國外主流的一些主機(jī)廠的認(rèn)可。包括一些知名的Tier-1，也在發(fā)展自己的雙目能力，如博世、大陸等，Mobileye也在一直修煉內(nèi)功。國內(nèi)主機(jī)廠需要看到這個趨勢。

盡管雙目擁有一定的技術(shù)優(yōu)勢，但由于供應(yīng)商太少，整體聲音較弱。國內(nèi)無論主機(jī)廠還是市場對雙目方案的認(rèn)可度、信任度都比較低。

只做高利潤的Tier-2

元橡科技的目標(biāo)和定位都是做Tier-2，這不僅僅是因?yàn)橄胍焖僬碱I(lǐng)市場，必須依賴Tier-1等巨頭幫忙推進(jìn)，另一方面，作為一個技術(shù)型的公司，擁有了一定的技術(shù)壁壘之后，只需要提供技術(shù)方案獲取最高利潤即可，并不需要去做生產(chǎn)制造。

生產(chǎn)制造是一個繁復(fù)冗余的過程，需要完善的管理、精密的管控，一般Tier-1或者主機(jī)廠也會愿意指定一些擁有相應(yīng)制造實(shí)力的公司。

同時(shí)如果公司涉足了生產(chǎn)，就會潛在的成為原來一些有實(shí)力的制造商的競爭者，對于發(fā)展而言并不有利。因此元橡科技未來也不打算涉足生產(chǎn)制造環(huán)節(jié)，會像國外的科技公司一樣只提供技術(shù)方案。

目前元橡科技的人員有20余人，已經(jīng)拿到了眾多主機(jī)廠的合作訂單，會在近期完成一輪融資。將核心研發(fā)人員擴(kuò)充到40人，周邊應(yīng)用開發(fā)人員要達(dá)到20人，還要建立自己的FAE團(tuán)隊(duì)，用來培養(yǎng)Tier-1或者主機(jī)廠的工作人員。

另外除了北京是核心研發(fā)的駐地外，元橡在上海也設(shè)立了產(chǎn)品應(yīng)用的部門，用來服務(wù)長三角周邊的大量主機(jī)廠客戶。

公司希望將來把產(chǎn)品做成一個標(biāo)準(zhǔn)件，然后批量給主機(jī)廠、自動駕駛公司使用，而不是忙不迭的做一個又一個的定制項(xiàng)目。同時(shí)，未來希望做全球頂級的雙目視覺軟硬件方案提供商。

公司目前主要的合作伙伴將會是Tier-1、主機(jī)廠，自動駕駛相關(guān)的將會稍微偏弱，畢竟離應(yīng)用太遠(yuǎn)。但也會做一些典型的CASE，用來培育市場（元橡科技在OpenSpace中可以達(dá)到幾乎100%的可靠性，自動駕駛公司可以通過公司的方案來做路徑規(guī)劃）。

除了在車載領(lǐng)域的應(yīng)用，元橡還涉足了機(jī)器人、無人機(jī)等領(lǐng)域。計(jì)算機(jī)視覺的技術(shù)，原本就是相通的，如果能服務(wù)于車載領(lǐng)域，那么在消費(fèi)領(lǐng)域和工業(yè)領(lǐng)域也順理成章。

返回第一電動網(wǎng)首頁 >