過去50余年,,芯片制程迭代沿著摩爾定律滾滾向前,并持續(xù)增強(qiáng)著芯片的算力與性能?,F(xiàn)如今,,無論是在SoC上集成越來越多的功能模塊,又或是利用chiplet技術(shù)在先進(jìn)制程下進(jìn)一步提升芯片集成度,,都充分展現(xiàn)了芯片性能,、功耗和成本的改進(jìn)不能僅僅依賴于制程的升級(jí),而需從不同的維度拓展創(chuàng)新來延續(xù)摩爾定律的“經(jīng)濟(jì)效益”,。這導(dǎo)致芯片設(shè)計(jì)變得越來越困難,,IP的作用也愈加凸顯,,逐漸成為企業(yè)尋求設(shè)計(jì)差異化道路上的“秘鑰”。
日前,,在深圳舉辦的第10屆EEVIA年度中國硬科技媒體論壇暨產(chǎn)業(yè)鏈研創(chuàng)趨勢展望研討會(huì)上,,Imagination產(chǎn)品市場高級(jí)經(jīng)理黃音在演講中表示,半導(dǎo)體行業(yè)對(duì)高性能SoC 需求的增長提振了IP技術(shù)市場,,作為全球領(lǐng)先的半導(dǎo)體IP供應(yīng)商,,Imagination正緊隨市場發(fā)展趨勢,持續(xù)進(jìn)行技術(shù)創(chuàng)新,,其核心領(lǐng)域的IP技術(shù)演變折射了未來一些熱門應(yīng)用顯著的需求變化,。
Imagination產(chǎn)品市場高級(jí)經(jīng)理黃音在論壇上介紹Imagination IP技術(shù)如何賦能未來硬核科技創(chuàng)新
“倒金字塔”讓IP供應(yīng)商的價(jià)值重新被審視
隨著服務(wù)器市場蓬勃發(fā)展,物聯(lián)網(wǎng)與AIoT應(yīng)用普及落地,,5G+人工智能等技術(shù)賦能經(jīng)濟(jì)社會(huì)數(shù)字化轉(zhuǎn)型,,黃音表示IP也像蝴蝶一樣,從卵,、幼蟲到蝶變的過程反映了應(yīng)用市場需求的這種變化,,并推動(dòng)技術(shù)不斷發(fā)展,越來越多的半導(dǎo)體廠商開始考慮借助外力,,例如專業(yè)的IP公司在某一個(gè)領(lǐng)域提供完整的技術(shù)服務(wù),,從而降低成本并節(jié)省產(chǎn)品進(jìn)入市場的時(shí)間。
IP作為經(jīng)驗(yàn)證可復(fù)用的芯片設(shè)計(jì)模塊,,從市場價(jià)值來看,,其全球市場規(guī)模約為50億美元,但卻撬動(dòng)著6000億美元的半導(dǎo)體產(chǎn)業(yè)不斷演進(jìn),,并賦能1.4萬億的電子信息制造業(yè)持續(xù)發(fā)展,。黃音補(bǔ)充道:“據(jù)lPnest數(shù)據(jù)統(tǒng)計(jì),在年均600多億美元的全球芯片研發(fā)開支中,,IP研發(fā)投入只占6%約36億,,但其價(jià)值和影響力卻遠(yuǎn)遠(yuǎn)超出用金錢衡量的份額。IP作為整個(gè)半導(dǎo)體上游產(chǎn)業(yè)鏈里的核心,,每一元芯片能撐起200多元的社會(huì)經(jīng)濟(jì),,而每一元IP能支持20000元的社會(huì)經(jīng)濟(jì)價(jià)值?!?/p>
數(shù)十億美元的IP行業(yè)支撐著數(shù)千億美元的半導(dǎo)體行業(yè)
為何小小的IP,卻如此重要,。芯片巨頭公司擁有足夠的技術(shù),、人才和資金儲(chǔ)備,能夠面向巨大市場的挑戰(zhàn),,而中小型公司及創(chuàng)業(yè)公司,,在資源的約束下只能專注于某些細(xì)分市場,。但無論公司的體量是大是小,都面臨著激烈的市場競爭,,都希望形成技術(shù)壁壘和強(qiáng)大的生態(tài)系統(tǒng)以更好地生存,。而在近乎無限的科技海洋中,沒有任何一家公司能精通一切,。而IP廠商們能夠以某個(gè)領(lǐng)域的專業(yè)技術(shù)能力和經(jīng)驗(yàn),,提供部分核心技術(shù)的成熟產(chǎn)品,協(xié)助芯片設(shè)計(jì)公司和系統(tǒng)廠商,,加快技術(shù)的產(chǎn)業(yè)化周期,,提升靈活性和市場反應(yīng)速度,降低了研發(fā)風(fēng)險(xiǎn),、運(yùn)營成本,,加速產(chǎn)品上市和增加利潤,幫助企業(yè)專注于自身核心競爭力的發(fā)展,,也是其實(shí)現(xiàn)差異化的關(guān)鍵競爭要素之一,。
“Imagination技術(shù)創(chuàng)新始終聚焦于功能的豐富和面積、性能與功耗優(yōu)化,,并致力于實(shí)現(xiàn)最佳的能效比,,為客戶創(chuàng)造不可復(fù)制的核心價(jià)值?!秉S音進(jìn)一步說到,,“對(duì)于IP廠商來說,PPA的三個(gè)維度都是重點(diǎn)考量的標(biāo)準(zhǔn),,而Imagination的IP產(chǎn)品通過合理調(diào)整三個(gè)維度的占比,,來完成對(duì)不同市場的適應(yīng)能力,目前已在手機(jī),、PC,、平板、汽車,、桌面服務(wù)器,、數(shù)據(jù)中心等領(lǐng)域得到了廣泛應(yīng)用?!?/p>
追求最佳PPA,,30多年技術(shù)積淀賦能獨(dú)特的GPU IP創(chuàng)新
從市場發(fā)展趨勢來看,隨著數(shù)據(jù)中心服務(wù)器規(guī)模不斷擴(kuò)大,,靈活性與可擴(kuò)展性正驅(qū)動(dòng)IP核供應(yīng)商的技術(shù)演變,,而功耗、帶寬與安全性是芯片設(shè)計(jì)繞不過的坎兒,針對(duì)這些需求如何在技術(shù)層面進(jìn)行創(chuàng)新則是整個(gè)行業(yè)關(guān)注的焦點(diǎn),。黃音在演講中自信表示Imagination基于在 GPU IP領(lǐng)域三十多年的經(jīng)驗(yàn)技術(shù)積累,,以多項(xiàng)獨(dú)有的專利和核心技術(shù)構(gòu)筑了行業(yè)領(lǐng)先的價(jià)值壁壘。
靈活可擴(kuò)展的GPU硬件架構(gòu)技術(shù)
Imagination的GPU硬件架構(gòu),,有非常好的靈活性和延展性,,根據(jù)不同的市場和產(chǎn)品需求,單核GPU可以配置為從1PPC,、2PPC直到64PPC等不同規(guī)格,,根據(jù)低、中,、高不同需求可進(jìn)行多個(gè)不同圖像處理能力,、浮點(diǎn)運(yùn)算能力的搭配。如果需要更大規(guī)模的配置,,還可以進(jìn)一步提供松耦合的多核架構(gòu),,甚至是幾個(gè)多核單元的聯(lián)合架構(gòu),以滿足超高性能超大算力的PC,、服務(wù)器等產(chǎn)品需求,。
Imagination的松耦合多核架構(gòu)技術(shù),能在單個(gè)芯片內(nèi)靈活地切換模式,,比如在需要高性能時(shí)可以作為單GPU多核協(xié)同工作,,進(jìn)行聯(lián)合渲染和計(jì)算;在需要并行的計(jì)算多個(gè)不同業(yè)務(wù)時(shí),,可以作為多個(gè)單核GPU分別獨(dú)立工作,,互不干擾,非常實(shí)用,。而這個(gè)松耦合的技術(shù),,甚至可以延展到多顆芯片之間,把一個(gè)多核GPU,,合理分布到不同的芯片die上,,再通過chiplet技術(shù),使它們重新連接起來,,能實(shí)現(xiàn)與單芯片一樣的靈活的模式切換,,既能多核聯(lián)合渲染和計(jì)算,又能分別獨(dú)立工作,。在當(dāng)今瞬息萬變的市場環(huán)境下,,這種技術(shù)給芯片設(shè)計(jì)公司提供了不需要重新流片就擁有的高靈活性和高擴(kuò)展性,可以應(yīng)對(duì)市場需求靈活轉(zhuǎn)身,。
分塊延遲渲染技術(shù)(TBDR)
在GPU的渲染技術(shù)上,,與桌面GPU通常使用的立即渲染模式不同,Imagination業(yè)內(nèi)最早提出并采用了分塊延遲渲染(Tile-Based Deferred Rendering,TBDR)技術(shù),,在頂點(diǎn)著色和光柵化之后加入了延遲環(huán)節(jié),充分利用系統(tǒng)內(nèi)存并通過只渲染可見的像素片段,,放棄被覆蓋或被遮擋的像素片段來大幅提高整體效率,,提供更高渲染性能的同時(shí)對(duì)帶寬和功耗的要求更低。TBDR技術(shù),,在帶寬有效利用,、工作負(fù)載高效分配和處理上,有明顯的技術(shù)優(yōu)勢,,這是其獨(dú)到之處,。
Imagination的分塊延遲渲染(TBDR)技術(shù)
IMGIC壓縮技術(shù)
為節(jié)省帶寬,目前業(yè)內(nèi)SoC芯片大多采用硬件壓縮技術(shù),,據(jù)黃音介紹,,IMGIC壓縮技術(shù)可以同時(shí)支持像素完全無損壓縮和有損壓縮,有損壓縮支持四種壓縮等級(jí),,包括壓縮率分別為75%(質(zhì)量接近完美),、50%(視覺無損)、37.5%(一定損失),、25%(最節(jié)省帶寬)的有損壓縮,。無損壓縮之后,與原圖沒有差別,,還能節(jié)省平均50%左右的帶寬,。有損壓縮,則能根據(jù)配置的壓縮等級(jí),,同時(shí)將帶寬,、圖片存儲(chǔ)尺寸壓縮到指定比例,進(jìn)行有效節(jié)省,,且在大部分情況下,,肉眼很難察覺出壓縮后的圖片差異。
GPU硬件虛擬化
值得一提是,,Imagination還是業(yè)界第一家實(shí)現(xiàn)GPU硬件虛擬化IP授權(quán)的公司,,并已廣泛應(yīng)用于眾多車型中。黃音解釋道在汽車應(yīng)用中,,利用硬件虛擬化技術(shù),,OEM廠商可以實(shí)現(xiàn)服務(wù)與應(yīng)用程序的完全隔離,以確保在系統(tǒng)被入侵或數(shù)據(jù)毀損的情況下仍能保持安全,。GPU硬件虛擬化解決方案可最多同時(shí)支持八個(gè)各自獨(dú)立的容器以運(yùn)行應(yīng)用程序或服務(wù),,汽車 OEM 廠商能任意部署并移除服務(wù)和應(yīng)用,完全不會(huì)影響其他同時(shí)運(yùn)行的容器中的服務(wù)和應(yīng)用。除了隔離,,硬件虛擬化技術(shù)還支持對(duì)多個(gè)汽車OS和應(yīng)用之間,,靈活地調(diào)整業(yè)務(wù)優(yōu)先級(jí)和分配GPU性能,節(jié)省軟硬件成本,。
基于固件的GPU
此外在許多架構(gòu)中,,硬件圖形事件是由圖形驅(qū)動(dòng)程序在CPU上處理的,但I(xiàn)magination首創(chuàng)的基于固件的GPU能夠在內(nèi)部以超低延遲處理大多數(shù)圖形事件,,這種方法還減少了圖形驅(qū)動(dòng)程序的主機(jī)CPU開銷,,并提供了大量有益的額外特性,例如在GPU出錯(cuò)的時(shí)候,,采集全部的數(shù)據(jù)日志進(jìn)行錯(cuò)誤分析,,通過GPIO連接外部的攝像頭或壓縮解壓縮的設(shè)備進(jìn)行功耗的控制等。
“得益于諸如此類獨(dú)有的核心技術(shù),,Imagination王牌IP核產(chǎn)品PowerVR GPU誕生30年,,為3D、2D圖形及高性能GPU計(jì)算提供了行業(yè)領(lǐng)先的高效靈活解決方案,?!秉S音進(jìn)一步補(bǔ)充道,“2019年,,Imagination的GPU架構(gòu)有了很大的升級(jí),,推出了A系列AXT GPU,作為Imagination的第十代核,,相較于第九代性能密度比提高了2.5倍,,擁有更完善的運(yùn)算邏輯單元,提高了紋理處理的能力,,能夠配置Cache Size,,而且優(yōu)化了壓縮算法;2020年,,推出B系列BXT GPU產(chǎn)品開始支持多核技術(shù),,并且在算力上進(jìn)行了優(yōu)化,在微架構(gòu)上進(jìn)行了微調(diào),;2021年,,推出的C系列CXT GPU增加了光線追蹤(RAC)的核可以做到硬件光追加速,以滿足不同的產(chǎn)品需求,?!?/p>
從2019年到2022年,Imagination 陸續(xù)推出性能強(qiáng)大的GPU IP系列
構(gòu)建算力新生態(tài),,迎接異構(gòu)計(jì)算機(jī)遇與挑戰(zhàn)
過去的50年是算法和算力發(fā)展的50年,,計(jì)算的創(chuàng)新和演進(jìn)聚焦于可擴(kuò)展性,、靈活性、效能,、效率以及可編程性上,。而當(dāng)數(shù)據(jù)大爆發(fā)帶來了AI計(jì)算的需求,包括SoC設(shè)計(jì)公司在內(nèi)的芯片公司,,都在追求更高性能,、更低功耗、更節(jié)省帶寬的方案,,異構(gòu)計(jì)算便是必由之路。這需要在硬件和SoC整體設(shè)計(jì)上采用異構(gòu)解決方案,,把不同類型的核進(jìn)行集成,,如CPU、GPU,、NPU,、神經(jīng)網(wǎng)絡(luò)加速單元等進(jìn)行疊加,對(duì)數(shù)據(jù)進(jìn)行專業(yè)分工和更先進(jìn)的處理,。
針對(duì)異構(gòu)計(jì)算的趨勢,,據(jù)黃音介紹,Imagination將從多個(gè)方向進(jìn)行創(chuàng)新,。首先GPU將持續(xù)在多核架構(gòu)上演進(jìn),、在性能跟功耗上優(yōu)化。黃音指出:“Imagination的GPU架構(gòu)支持16和32位浮點(diǎn)運(yùn)算(FLOAT Operation),,以及INT 8/16/32定點(diǎn)運(yùn)算,,而紋理處理單元、反扭曲處理,、基礎(chǔ)過濾,、結(jié)合著色器做更加復(fù)雜的過濾……這些都能通過GPU里的不同運(yùn)算器來實(shí)現(xiàn)?!?從A系列開始,,PowerVR GPU使用了全新的算術(shù)邏輯單元(ALU)架構(gòu)、調(diào)度更簡單的引擎,,可以在相同的芯片面積和功耗預(yù)算中使用更多的通道,,完全擁抱大規(guī)模線程級(jí)并行的設(shè)計(jì)趨勢,并簡化編譯器工作,,從而獲得更高的利用率和效率,。
Imagination針對(duì)異構(gòu)計(jì)算在IP架構(gòu)上的創(chuàng)新技術(shù)
Imagination也擁有業(yè)界領(lǐng)先的神經(jīng)網(wǎng)絡(luò)加速器NNA,采用全硬化的神經(jīng)網(wǎng)絡(luò)加速方法學(xué),,達(dá)到業(yè)界領(lǐng)先的PPA,。作為異構(gòu)計(jì)算的主力和最高效的部分,,NNA擁有著相比CPU和GPU更大的算力和更高的算力密度,承載著大部分的計(jì)算任務(wù),。
不僅如此,,在2021年底 Imagination 宣布推出全新RISC-V CPU核Catapult,作為對(duì)GPU和NNA的有效補(bǔ)充,,CPU發(fā)揮其在控制流和靈活性上的優(yōu)勢,,高效地控制和調(diào)度好GPU和NNA進(jìn)行計(jì)算,同時(shí)也在整體上高效地查漏補(bǔ)缺,,是異構(gòu)計(jì)算中不可或缺的一環(huán),。
其次,在軟件與系統(tǒng)層面,,Imagination為異構(gòu)計(jì)算提供了統(tǒng)一,、開放并且標(biāo)準(zhǔn)的工具鏈,支持標(biāo)準(zhǔn)的framework操作,,同時(shí)為了消除數(shù)據(jù)瓶頸,,對(duì)存儲(chǔ)、安全進(jìn)行了創(chuàng)新性優(yōu)化,,使開發(fā)者可以快速靈活地把他們的應(yīng)用部署在異構(gòu)計(jì)算架構(gòu)上,。在整個(gè)工具鏈中,無論是從編譯準(zhǔn)備還是到設(shè)備端實(shí)現(xiàn)異構(gòu)運(yùn)算,,Imagination為開發(fā)者提供了豐富的部署和優(yōu)化功能,,包括可以幫助開發(fā)者確定量化策略,滿足符合其應(yīng)用性能和精度的要求,,并最大程度將靈活性留給開發(fā)者,。
異構(gòu)計(jì)算具體到應(yīng)用層面,黃音表示在汽車行業(yè)Imagination與芯片廠商,、Tier-1廠商合作以及OEM廠商積極展開生態(tài)合作,,提供IP整體解決方案,重塑與車輛的交互方式,。目前Imagination也是汽車行業(yè)最大的GPU IP供應(yīng)商,,在駕艙領(lǐng)域擁有約51%的市場份額。
在游戲,、VR/AR等應(yīng)用中,,硬件實(shí)時(shí)光線追蹤技術(shù)是Imagination最早提出來并實(shí)現(xiàn)的。光線追蹤可以在不同的性能和效率等級(jí)下實(shí)現(xiàn),,為了明確這一點(diǎn),,Imagination 建立了光線追蹤等級(jí)系統(tǒng)(RTLS),確定了從Level 0到Level 5共6個(gè)等級(jí)的光線追蹤功能的要求,。IMG CXT采用的Photon架構(gòu)處于RTLS的4級(jí)(Level 4),,這是當(dāng)前可用的最先進(jìn)的硬件光線追蹤技術(shù),,應(yīng)用在移動(dòng)端可為移動(dòng)游戲玩家和開發(fā)者提供實(shí)時(shí)硬件光線追蹤和桌面級(jí)質(zhì)量的體驗(yàn)。
邁入真正的智能時(shí)代,,數(shù)字化技術(shù)成為剛需,,這離不開芯片的加持,無論是移動(dòng)設(shè)備,、汽車和電器等數(shù)字消費(fèi)應(yīng)用,,還是數(shù)據(jù)中心、服務(wù)器等基礎(chǔ)設(shè)施行業(yè),,都需要越來越多利用先進(jìn)的IP技術(shù)賦能,。黃音展望道:“成立30多年來,Imagination一直致力提供高性能IP產(chǎn)品與解決方案,,而Imagination在技術(shù)上的領(lǐng)先既被市場驅(qū)動(dòng),,也引領(lǐng)市場發(fā)展,未來Imagination同樣將緊隨市場脈絡(luò),,提高IP核的可擴(kuò)展性、靈活性和效率,,并通過創(chuàng)建強(qiáng)大的異構(gòu)計(jì)算解決方案,,在移動(dòng)、汽車,、桌面和數(shù)據(jù)中心等多元化市場中發(fā)掘軟件,、數(shù)據(jù)和服務(wù)的價(jià)值?!?/p>