動(dòng)態(tài)信息

關(guān)注我們,了解更多動(dòng)態(tài)信息

收購深鑒之后,賽靈思如何開啟自動(dòng)駕駛新篇章?

   


7月17日,一則重磅消息震驚整個(gè)AI產(chǎn)業(yè),全球最大的FPGA 廠商賽靈思宣布收購中國 AI 芯片領(lǐng)域的明星創(chuàng)業(yè)公司——深鑒科技。一直以來賽靈思不僅是深鑒科技的忠實(shí)投資者,也是深鑒科技的重要合作伙伴。深鑒科技在其AI核心技術(shù)的研究上極其依賴于賽靈思,其推出的兩款DPU都是基于賽靈思的FPGA 器件,而賽靈思也正是FPGA的發(fā)明者。

日前,國際電子商情采訪到賽靈思,一起來看看,賽靈思在汽車市場的布局,以及收購深鑒科技之后的產(chǎn)品路線圖。電子制作模塊

7月17日,一則重磅消息震驚整個(gè)AI產(chǎn)業(yè),全球最大的FPGA 廠商賽靈思宣布收購中國 AI 芯片領(lǐng)域的明星創(chuàng)業(yè)公司——深鑒科技。一直以來賽靈思不僅是深鑒科技的忠實(shí)投資者,也是深鑒科技的重要合作伙伴。深鑒科技在其AI核心技術(shù)的研究上極其依賴于賽靈思,其推出的兩款DPU都是基于賽靈思的FPGA 器件,而賽靈思也正是FPGA的發(fā)明者。

 image002.jpg

賽靈思大中華區(qū)銷售副總裁Maria Tang 唐曉蕾 

賽靈思在汽車領(lǐng)域的布局和創(chuàng)新

7月24日深圳舉行的賽靈思汽車應(yīng)用媒體說明會(huì)上,賽靈思大中華區(qū)銷售副總裁Maria Tang 唐曉蕾、賽靈思汽車產(chǎn)品營銷經(jīng)理孫蕾蕾和賽靈思機(jī)器學(xué)習(xí)資深產(chǎn)品營銷經(jīng)理羅霖詳細(xì)介紹了賽靈思在汽車市場的布局,以及收購深鑒科技之后的產(chǎn)品路線圖。

唐曉蕾表示,賽靈思收購深鑒科技后,將會(huì)在AI、大數(shù)據(jù)、邊緣計(jì)算領(lǐng)域有更多的創(chuàng)新和布局。此外,唐曉蕾也正重點(diǎn)介紹了今年3月推出的新一代技術(shù)自適應(yīng)計(jì)算加速平臺(tái)ACAP。

作為全球FPGA的發(fā)明者以及首個(gè)全球無晶圓半導(dǎo)體廠,2017年,賽靈思銷售額到了23.5億美元,全球市場份額超過了60%,客戶達(dá)到20000多個(gè),分布在多個(gè)不同的行業(yè)和市場領(lǐng)域。

此前,筆者曾經(jīng)采訪過賽靈思全球銷售和市場部亞太及日本地區(qū)高級(jí)總監(jiān)Stephen Chow(周海天),了解換帥后賽靈思2018年的發(fā)展策略,同時(shí)也談到了賽靈思在人工智能領(lǐng)域的布局和規(guī)劃。

對(duì)于賽靈思來說,2018年人工智能將是關(guān)注的重點(diǎn),目前FPGA的應(yīng)用領(lǐng)域主要集中在服務(wù)器端如云計(jì)算、大數(shù)據(jù)分析等。2017年賽靈思的平臺(tái)不僅被亞馬遜的語音計(jì)算平臺(tái)采用,同時(shí)國內(nèi)的華為、騰訊、阿里巴巴也是通過賽靈思的FPGA來進(jìn)行云計(jì)算和加速運(yùn)算。

展望2018年下半年,汽車自動(dòng)駕駛將是賽靈思的重點(diǎn)發(fā)展方向。在今年的3月份,賽靈思推出了新一代技術(shù)ACAP自適應(yīng)計(jì)算加速平臺(tái),對(duì)于ACAP,賽靈思定義為一個(gè)新的計(jì)算類別,希望超越傳統(tǒng)的CPU和GPU,希望未來不管是工業(yè)還是數(shù)據(jù)中心,都能用ACAP來耕耘這個(gè)市場。

從計(jì)算終端發(fā)展來看,從PC到智能手機(jī),未來是一個(gè)邊緣智能時(shí)代,包括車聯(lián)網(wǎng)、5G、工業(yè)4.0等。唐曉蕾表示,未來基于FPGA的異構(gòu)計(jì)算將是大勢(shì)所趨。

image003.jpg
賽靈思在產(chǎn)品上有哪些更新?

隨著數(shù)字化的出現(xiàn),很多互聯(lián)網(wǎng)公司進(jìn)入到汽車領(lǐng)域。包括百度的阿波羅計(jì)劃,菜鳥物流的自動(dòng)駕駛,京東的送貨機(jī)器人,這個(gè)市場的玩家越來越多。賽靈思在汽車領(lǐng)域并不是新玩家。

賽靈思從2004年開始進(jìn)入汽車行業(yè),首先是在歐美國家進(jìn)入tear 1的車廠。到2014年已經(jīng)有14個(gè)品牌,目前已經(jīng)有很多中國的品牌在使用。很多汽車行業(yè)對(duì)于FPGA非常感興趣。到2018年,已經(jīng)有29個(gè)品牌、110個(gè)車型用到賽靈思的產(chǎn)品,累計(jì)發(fā)貨芯片超過4000萬片。“汽車是供應(yīng)鏈很長的市場,需要長期的投入。我們希望能夠跟著大中華地區(qū)來一起成長。” 唐曉蕾表示。

唐曉蕾表示,賽靈思通過Zynq 7000(雙核)以及MP SOC(四核)賽靈思切入了自動(dòng)駕駛領(lǐng)域,主要?jiǎng)?chuàng)新應(yīng)用在全屏顯示,駕駛員監(jiān)控、拖車影像等領(lǐng)域,還有雙目攝像頭、環(huán)視系統(tǒng)等都可以找到賽靈思的產(chǎn)品應(yīng)用方向。

image004.jpg

前后攝像頭、環(huán)視攝像頭和ADAS 激光雷達(dá)都可以用到賽靈思的產(chǎn)品。據(jù)介紹,在前端攝像頭單元市場賽靈思目前占到38%的市場份額。未來歐美的新車出廠,如果要達(dá)到5星安全標(biāo)準(zhǔn),前置攝像頭是必備的需求,因此未來該市場有望繼續(xù)增長。

image005.jpg

在激光雷達(dá)領(lǐng)域,賽靈思目前占到了90%份額以上。唐曉蕾表示,當(dāng)設(shè)計(jì)在變的時(shí)候,F(xiàn)PGA本身硬件和軟件都在變,可以配合算法的快速更新。因此在新興的行業(yè)中,F(xiàn)PGA是首選。

image006.jpg

4D雷達(dá)主要通過RF傳感器來確定目標(biāo)的位置。激光雷達(dá)由于成本較高,目前汽車行業(yè)在考慮4D雷達(dá)的使用,現(xiàn)在市場上2D雷達(dá)有不同的地方,2D雷達(dá)看距離和角度??吹酶忧宄?,對(duì)周圍的環(huán)境更加了解。

image007.jpg

對(duì)于4D雷達(dá)來說,由于需要大量使用同步處理流水線,賽靈思的FPGA在這個(gè)領(lǐng)域就更具優(yōu)勢(shì)。孫蕾蕾也表示,激光雷達(dá)的成本也逐漸降低,也不會(huì)說4D雷達(dá)會(huì)取代激光雷達(dá),4D雷達(dá)也不會(huì)像2D雷達(dá)一樣的成本,現(xiàn)在激光雷達(dá)還是2D雷達(dá)的20倍的價(jià)錢,未來這個(gè)價(jià)格會(huì)逐漸接近。

image008.jpg

賽靈思在大中華區(qū)的合作伙伴,包括??低暎还苁峭\囅到y(tǒng)還是自動(dòng)環(huán)視系統(tǒng)都會(huì)用到賽靈思的產(chǎn)品。

戴姆勒奔馳無人駕駛為何選擇賽靈思?

7月11日,賽靈思和戴姆勒公司宣布,兩家公司正強(qiáng)強(qiáng)聯(lián)手采用賽靈思汽車應(yīng)用領(lǐng)域的人工智能 (AI) 處理技術(shù)共同開發(fā)車載系統(tǒng)。此項(xiàng)可擴(kuò)展的解決方案由融片上系統(tǒng)(SoC)器件和 AI 加速軟件為一體的賽靈思汽車平臺(tái)提供支持,將為當(dāng)今汽車應(yīng)用領(lǐng)域中的嵌入式 AI 帶來諸如高性能、低時(shí)延以及業(yè)界最佳的功率效率等眾多優(yōu)異特性。

提到與戴姆勒奔馳的合作,孫蕾蕾 表示,大的車廠會(huì)有很多不同的技術(shù)團(tuán)隊(duì),會(huì)跟進(jìn)不同的技術(shù)方向,不會(huì)在大的客戶看到一種技術(shù)方向。戴姆勒在跟賽靈思的合作過程中,發(fā)現(xiàn)賽靈思的產(chǎn)品在低延時(shí)、高功耗的產(chǎn)品是不可取代的。孫蕾蕾表示,在低延時(shí)、高信號(hào)比、靈活度上賽靈思的優(yōu)勢(shì)將會(huì)一直存在。

為什么無人駕駛技術(shù)要選擇賽靈思的FPGA平臺(tái)呢?孫蕾蕾表示,對(duì)于無人駕駛來說,反應(yīng)速度非常重要。需要用到攝像頭、激光雷達(dá)和雷達(dá)。有的汽車?yán)走_(dá)需要10個(gè),所有的頻道要分析大的數(shù)據(jù)量,另外計(jì)算器、加速器也非常重要。所以賽靈思做了很多的功夫。另外OEM廠商開發(fā)的時(shí)候希望有一些差異性,所以賽靈思的產(chǎn)品是可以用自己的IP來做更新。

image009.jpg

FPGA還有一個(gè)優(yōu)勢(shì)是可擴(kuò)展性。動(dòng)態(tài)功能交換,整個(gè)硬件可以用不同的功能,同樣的FPGA為什么需要這么大的邏輯單元?比如你開車在高速公路和低速公路上需要的功能不同。

以后的汽車因?yàn)闊o人駕駛,需要對(duì)汽車的速度進(jìn)行同步。在低速的時(shí)候,要看到交通燈、行人、停車這些不同的功能,所以同一個(gè)FPGA可以做不同的功能。孫蕾蕾表示,賽靈思是第一個(gè)無線更新軟硬件升級(jí)的,所以為客戶增加了很多的靈活度。另外FPGA的散熱能力增加了,可在高溫的工作環(huán)境下正常運(yùn)作。

針對(duì)ADAS/AD的嵌入式視覺要求

image010.jpg

從過去的40年到近兩年,每天都會(huì)有很多創(chuàng)新的算法出現(xiàn),如何能夠有效的支撐這些新的網(wǎng)絡(luò)?對(duì)于ASIC來說這是一個(gè)巨大的挑戰(zhàn)。雖然目前有很多的芯片架構(gòu)都針對(duì)人工智能,但在人工智能發(fā)展初期的一些應(yīng)用上,在還沒找到最優(yōu)的算法和性能的時(shí)候,絕對(duì)是FPGA更合適。“如果一旦有一個(gè)網(wǎng)絡(luò)出來,我有一個(gè)很靈活的平臺(tái),我可以快速的部署我最新的創(chuàng)新,這是客戶最需要的東西。”羅霖表示。

image011.jpg

在很多時(shí)候,時(shí)間是花在數(shù)據(jù)的搬運(yùn)上,在計(jì)算架構(gòu)上,我們希望數(shù)據(jù)能夠盡量停在芯片商。這意味著客戶需要大量的片上內(nèi)存,賽靈思的嵌入式FPGA和英偉達(dá)的Tegea X1相比,具有更好的存儲(chǔ)性能,可以降低時(shí)延。

image012.jpg

目前主要的云服務(wù)廠商已經(jīng)廣泛使用FPGA服務(wù),通過完整的加速堆棧支持軟件開發(fā),以及面向嵌入式系統(tǒng)的FPGA設(shè)計(jì)的軟件驅(qū)動(dòng)工具和方法,賽靈思面向的將不再只是硬件工程師。羅霖表示,在底層平臺(tái)賽靈思已經(jīng)幫客戶定義好了一些標(biāo)準(zhǔn)的硬件平臺(tái),上面很多的傳感器包括傳感器、USB和MIPI的接口,創(chuàng)建工程,上面可以用高級(jí)語言來開發(fā)。同時(shí)利用機(jī)器學(xué)習(xí)的庫來很快的部署應(yīng)用。

image013.jpg

談到未來的產(chǎn)品路線規(guī)劃。羅霖表示,目前賽靈思主要提供的產(chǎn)品包括前置的攝像頭,一級(jí)單目、雙目、偏離檢測等,包括面向司機(jī)的疲勞駕駛檢測,下一步會(huì)在2019年做到L1\L2,會(huì)把前置攝像頭和毫米波雷達(dá)融合,采用的是大一點(diǎn)的Zynq 器件,另外國內(nèi)現(xiàn)在要求很強(qiáng)的自動(dòng)泊車的系統(tǒng)。包括一些女司機(jī)可以自如的完成停車動(dòng)作。

再下一步是L3的規(guī)劃,包括多攝像頭和傳感器的平臺(tái),比如自動(dòng)泊車,OMS(駕駛艙類人車智能交互應(yīng)用),通過這種技術(shù)可以防止出現(xiàn)把小孩關(guān)在車中的情況。

L4將采用是ACAP,據(jù)介紹目前已經(jīng)有一些歐美的客戶開始測試。

image014.jpg

羅霖表示,賽靈思正面向ADAS和AD的機(jī)器學(xué)習(xí)做了很多的研發(fā)和優(yōu)化,實(shí)現(xiàn)功耗、成本、靈活、上市時(shí)間的平衡。為了降低嵌入式開發(fā)學(xué)習(xí)的難度,目的是提供客戶的開發(fā)效率。

賽靈思客戶車載創(chuàng)新應(yīng)用案例

image015.jpg

舉一個(gè)真實(shí)客戶的案例,這是美國一個(gè)車廠的項(xiàng)目。采用賽靈思的ZCU 102開發(fā)平臺(tái),利用到賽靈思快速角點(diǎn)和密集光流的算法。

image016.jpg

羅霖表示,最早在上一代FPGA的板子通過ARM來跑,第二步把ARM的代碼移植到FPGA上,不斷的提升性能和進(jìn)行算法優(yōu)化。通過賽靈思的系統(tǒng)工具,客戶不需要寫任何一行硬件代碼就實(shí)現(xiàn)了開發(fā)。

image017.jpg

此外,一家知名的OEM汽車廠商,評(píng)估了壓縮工具。原先計(jì)算量是198G 精度達(dá)到80.4G,經(jīng)過壓縮后,模型壓縮到原來的7%,損失很大的情況下,另外需要用一個(gè)Zynq器件同時(shí)做12通道目標(biāo)檢測。

賽靈思 Gif 001.gif

這個(gè)案例是賽靈思幫美國一個(gè)汽車客戶做的一個(gè)神經(jīng)網(wǎng)絡(luò)的檢測,可以做到8通道30fps的性能。

賽靈思 Gif 002.gif

還有歐洲一個(gè)客戶要求用賽靈思的ZU9上的演示,來在神經(jīng)網(wǎng)絡(luò)實(shí)現(xiàn)像素級(jí)的分割,要求是四個(gè)通道。

賽靈思 Gif 008.gif

這是mini eye的3D攝像頭,可以檢測車的顏色,可以識(shí)別車牌。

賽靈思 Gif 007.gif

也可以識(shí)別車道線、紅綠燈、行人,和可行駛區(qū)域。在國內(nèi)很多公司,通過自己的研發(fā)做出來的算法效果在全球范圍是非常領(lǐng)先的。

賽靈思 Gif 006.gif

這是輔助停車的一個(gè)應(yīng)用,通過四個(gè)魚眼攝像頭來捕捉車身周圍的東西,通過深度學(xué)習(xí)可以檢測出車位的線。有了這些信息后,車輛可以自己找到車位來進(jìn)行泊車。

 賽靈思 Gif 005.gif

這個(gè)應(yīng)用是自行科技做的疲勞狀態(tài)的檢測,這個(gè)司機(jī)一旦分心,下方的綠色長條會(huì)減少,變成紅色。同時(shí)還可以進(jìn)行人臉識(shí)別,可以知道駕駛車的司機(jī)是誰。以后可以做出的應(yīng)用是這輛車只能某一個(gè)用戶通過人臉識(shí)別解鎖。

 賽靈思 Gif 003.gif

可以在一個(gè)芯片上跑不同的應(yīng)用,可以做分割、檢測、分類,在賽靈思的平臺(tái)上可以實(shí)現(xiàn)高效的深度學(xué)習(xí),用于ADAS和AD的應(yīng)用。

產(chǎn)品目錄
MULTICOMP PRO
Kyet 科雅薄膜電容器
喬光電子(FTR)
采樣電阻
KINGSTATE(志豐電子)
君耀電子(Brightking)
RUBYCON電容原裝現(xiàn)貨供應(yīng)商
HAMAMATSU 濱松光電產(chǎn)品
傳感器
飛思卡爾開發(fā)工具 Freescale
嵌入式解決方案
自動(dòng)化工業(yè)系統(tǒng)
網(wǎng)絡(luò)攝像機(jī)
行車記錄儀
地址(中國):杭州市拱墅區(qū)莫干山路972號(hào)北部軟件園泰嘉園B座303室
QQ:1261061025
郵箱:master@wfyear.com
電話:800-886-8870