微軟首度揭露其AR頭戴式裝置HoloLens內(nèi)部的客製化視覺處理器晶片細(xì)節(jié),。

微軟(Microsoft)近日首度透露了其擴(kuò)增實(shí)境(AR)頭戴式裝置HoloLens內(nèi)部的客製化視覺處理器晶片細(xì)節(jié),；該款晶片的處理能力達(dá)到每秒1兆(trillin)次畫素運(yùn)作(pixel-operations)，功耗比採用代號(hào)Cherry Trail的英特爾(Intel) Atom系列核心之主機(jī)處理器的4W還低,。
       該HoloLens處理單元(HPU)融合來自5個(gè)攝影機(jī)鏡頭,、一個(gè)深度感測(cè)器以及運(yùn)動(dòng)感測(cè)器的輸入資訊，將之壓縮并傳送到Intel的主處理器SoC,；此外HPU還能辨識(shí)手勢(shì)以及涵蓋多個(gè)房間的地圖環(huán)境,。微軟在今年稍早介紹了HoloLens的主要功能內(nèi)容，但并未公開其HPU細(xì)節(jié),。
       微軟評(píng)估了包括來自Movidius等供應(yīng)商的市售電腦視覺晶片,，卻發(fā)現(xiàn)并沒有任何一款產(chǎn)品能以其要求的性能、延遲以及功耗目標(biāo)處理所有演算法,；而后來的客製化HPU是採用28奈米臺(tái)積電(TSMC)製程,，內(nèi)含24顆Tensilica數(shù)位訊號(hào)處理器(DSP)核心以及8Mbyte的快取記憶體， 在尺寸僅12x12mm的晶片封裝中納入了6,500個(gè)邏輯閘以及1Gbyte容量的LPDDR 3,。

HPU的運(yùn)算引擎整合了Tensilica DPS核心以及多個(gè)加速器
（來源：Microsoft）

在近日于美國(guó)硅谷舉行的Hot Chips大會(huì)上介紹HPU的微軟杰出技術(shù)人員Nick Baker表示,，選擇Tensilica核心有部份原因是考量其彈性，微軟在核心中添加了300個(gè)客製化指令集：「如果你無法添加客製化指令集,，最后可達(dá)到的數(shù)學(xué)運(yùn)算密度不會(huì)是你需要的,。」
       HPU晶片混合採用獨(dú)立的加速器(accelerator),，以及與DSP核心緊密耦合的加速器,，在一個(gè)純軟體版本達(dá)到整體200倍的加速,；Baker表示：「我們盡可能按照需要採用可編程元素以及固定的功能硬體，以達(dá)到我們需要的性能目標(biāo),；」晶片的軟體程式碼包含多樣化的演算法:「具備不同的成熟度,、數(shù)學(xué)運(yùn)算以及記憶體存取模式?！?br/>       Baker透露,，HoloLens的開發(fā)分成硬體、軟體,、使用者體驗(yàn)與性能等不同團(tuán)隊(duì)同時(shí)進(jìn)行：「我們?cè)谶@個(gè)專案上將共同設(shè)計(jì)發(fā)揮到極致,；」他并強(qiáng)調(diào)，微軟內(nèi)部就有能力可將軟體模擬(simulation)測(cè)試結(jié)果,，轉(zhuǎn)化為也能在最終硬體成果上執(zhí)行的硬體模擬(emulation)程序：「所有工作都在Windows 10開發(fā)期間同時(shí)進(jìn)行,。」
       在3月份上市,、定價(jià)3,000美元的HoloLens開發(fā)套件就內(nèi)含了HPU,；不過對(duì)于HPU是否將有更新計(jì)畫，或是微軟何時(shí)會(huì)推出消費(fèi)者版本的HoloLens,，Baker婉拒發(fā)表意見,。展望未來，Baker認(rèn)為設(shè)計(jì)工程師們會(huì)將頭戴式裝置進(jìn)一步推向8K解析度,，以及支援更寬廣的視野,。
       「注視點(diǎn)渲染(Foveated rendering，也就是將使用者目標(biāo)聚焦范圍以外的任何景物維持模糊化的一種方法)可望變得越來越普及…以及各種不同解析度的顯示器也可能出現(xiàn),；」Baker表示：「我們需要思考這樣的趨勢(shì)對(duì)GPU,、互連技術(shù)以及面板產(chǎn)業(yè)等整個(gè)供應(yīng)鏈會(huì)帶來什麼影響?！?/p>