《電子技術應用》
您所在的位置:首頁 > 模擬設計 > 設計應用 > 動態可重構技術開始應用于數碼相機
動態可重構技術開始應用于數碼相機
摘要: 動態可重構(Dynamic Reconfigurable)技術的應用范圍不斷擴大。除了商用一體機及數碼相機等高價位電子產品外,應用范圍還擴展到了實際售價為1萬日元左右的數碼相機產品。
Abstract:
Key words :

  

采用動態可重構技術的產品示例。迄今已被富士施樂一體機及索尼廣播電視專業設備等采用。而且,新的采用案例有富士膠片數碼相機“F550EXR”,以及卡西歐計算機數碼相機“EX-TR100”等。

  動態可重構(Dynamic Reconfigurable)技術的應用范圍不斷擴大。除了商用一體機及數碼相機等高價位電子產品外,應用范圍還擴展到了實際售價為1萬日元左右的數碼相機產品。

  動態可重構技術在擁有與專用邏輯電路(硬連線電路,Hard-Wired Circuit)相當的處理性能的同時,還能夠像軟件一樣靈活改變電路構成。以前采用范圍以辦公一體機及廣播電視專業攝像機等百萬日元以上的高價位電子產品為中心,而最近終于開始向數萬日元的低價位消費類電子產品全面普及注1)。近一年來,有多家數碼相機廠商表示已在自己的產品上采用了動態可重構技術。其中也含有實售價格為1萬日元左右的產品。

  注1)以前在低價消費類電子產品領域,只有索尼在便攜音樂播放器及游戲機上采用了自主開發的有關技術。

  在這些廠商中率先采用的是卡西歐計算機。該公司在2010年11月上市的“HIGH SPEED EXILIM”系列數碼相機機型“EX-ZR10”上,配備了采用動態可重構技術的圖像處理LSI“EXILIM引擎HS”。包括該機型在內,卡西歐計算機已在“EX-ZR100”、“EXH20G”及“EX-TR100”合計四款機型上采用了動態可重構技術(圖1、圖2)。


圖1:采用動態可重構技術的數碼相機
卡西歐計算機和富士膠片分別宣布已在自己的數碼相機產品上采用了動態可重構技術。卡西歐計算機在“EXILIM引擎HS”上、富士膠片在“EXR處理器”上采用了該技術。

 
圖2:圖像處理LSI的內部構成
圖中列出了卡西歐計算機及富士膠片分別公開的圖像處理LSI的內部構成(a、b)。相似點是都具備兩個CPU內核。

  在卡西歐計算機發布相關產品4個月后,2011年2月富士膠片也展開了行動。富士膠片發布的“FinePix”系列數碼相機中,有“F550EXR”、“HS20 EXR”及“X100”三款機型配備了采用該技術的圖像處理LSI“EXR處理器”。

通過微細化使成本達到可以接受的水平

  眾多數碼相機廠商接連采用動態可重構技術的原因主要有兩點。

  第一是微細化的發展使該技術的最大瓶頸即電路規模的尺寸達到了可以接受的程度。消費類電子產品中使用的ASIC也開始越來越多地采用45nm工藝以后的制造技術,因此在數碼相機等低價消費類電子產品中采用該技術的巨大電路時,成本也已變得合算。

  動態可重構技術一般采用呈陣列狀排列大量(數十~1000個)8~32bit運算器(ALU)的架構。因此,處理性能遠遠高于運算器數量最多限制在10個左右的DSP等。但另一方面卻存在電路面積非常大,芯片單價往往也很高的問題。而且,為了能夠靈活改變電路構成,還需要在運算器之間設置開關,并使布線具有冗余性,因此與同樣采用大量運算器的硬連線電路相比,電路面積也往往較大。

  動態可重構技術從10年前亮相之初起就一直被公認“其高成本是采用于實際產品時的瓶頸”,實際上以前多半是在商用電子產品上采用的。然而,隨著時間的推移,半導體制造技術的微細化得到順利推進,由此,動態可重構技術終于能夠在1萬日元左右的消費類電子產品上使用了注2)。

  注2)FPGA與動態可重構技術一樣,隨著微細化的發展開始越來越多地采用于消費類電子產品。但是,與將8~32bit運算器作為構件的動態可重構技術相比,FPGA的構件由進行單純邏輯運算的LUT(Look-up Table)構成,構成陣列的構件的粒度較細。因此,實施媒體處理等操作的話,動態可重構技術的面積效率一般高于FPGA。

三項可編程性

  動態可重構技術開始在數碼相機中配備的另一原因在于,圖像處理LSI必須要在多種情況下具備出色的可編程性,也就是說必須要具備像軟件那樣的“靈活性”。具體體現在①電子產品的開發時、②供貨后使用電子產品時,以及③開發新一代機型時。

  其中尤其重要的是②使用電子產品時的可編程性。要想作為廠商保持獨創性,大量配備與其他公司相比容易形成賣點的功能的話,憑借硬連線電路及DSP等動態可重構技術以外的方法是很難實現的。

  比如,卡西歐計算機在該公司配備動態可重構技術的首款機型EX-ZR10中導入了稱為“HDR(High Dynamicrange)藝術”及“多幀超分辨率”的獨創功能。兩種功能均使用于高速連拍的圖像,前者通過合成多張圖像來生成動態范圍大的圖像,并在此基礎上由LSI對圖像內進行分析,局部調整色彩飽和度和對比度,輸出繪畫風格的圖像(圖3)。而后者則利用多幀圖像來提高分辨率。

 
圖3:復雜化的數碼相機圖像處理
數碼相機的圖像處理正在向多功能化及復雜化發展,比如重疊高速拍攝的多張圖像,制作出HDR圖像或形成繪畫風格。照片中的是卡西歐“EXZR100”利用“HDR藝術”功能的輸出示例。

  富士膠片也導入了獨創功能,比如識別攝影場景后從多達49種模式的畫質設定中選擇最佳設定的“PREMIUM EXRAUTO”,以及通過經由圖像處理來尋找對焦點的對比度AF來設定多達49個測距點。估計為實現這些功能采用了動態可重構技術。

易于導入具有挑戰性的功能

  要想在攝影時對超千萬像素的圖像基本同步實施計算量如此大的復雜處理,憑借DSP及以往的SIMD型處理器處理性能會不足。實現手段僅限于像硬連線電路或動態可重構技術那樣,能夠使用大量運算器組成長管線,或者能夠對大量像素實施并行處理的方法。

  不過,從硬連線電路來看,要想導入比如A~C三種功能時,一般需要單獨準備3種電路,芯片面積往往會變為3倍。假如A~C功能中含有成為電子產品賣點但實際使用頻率又很低的利基功能的話,由此占用的大量芯片面積就會使成本效率變差。

  而動態可重構技術具備②中所述的使用電子產品時的可編程性,能夠在運行中動態改變電路構成。因此,即便是使用頻率再低的利基功能,只要在營銷及銷售觀點上斷定其具有效果,也可不受芯片面積增加的不利影響,輕松導入。其原因是,采用動態可重構技術的話,只要是在固定的運算器陣列內實施處理,無論想要追加多少種功能,電路面積都不會成倍增加(圖4)。不運行的電路不會“耗費”芯片面積,平時隱藏在后臺的存儲器中注3)。

 
圖4:動態可重構技術的特點以及與其他技術間的比較
在對電子產品進行設計時、供貨后以及開發新一代機型時等多種階段,動態可重構技術發揮優點的情況日趨增加。

  注3)這一特性被比作虛擬存儲器,稱為“虛擬電路”。虛擬電路在切換多種處理時也很有效,但即便是一種處理,與規模超出運算器陣列的電路相比,也同樣具有能夠以適當級數折疊管線,以分時方式安裝的優點。富士施樂在一體機上就采用了這種方法。

  雖然動態可重構技術還要看其架構如何,但在安裝大約3種以上具有某種復雜程度的功能時,在芯片面積這一點上,還是比硬連線電路更為有利。無論卡西歐計算機還是富士膠片,都未公布采用動態可重構技術具體安裝了多少種功能等細節,但可以推測的是,采用動態可重構技術時上述判斷起到了一定作用。

 

 

還可降低開發時的風險

  另外,如③所述的開發新一代機型時的可編程性也很重要。硬連線電路的話,即使想要對以往機型的圖像處理算法加以修正、追加功能,不重新制作數億日元的掩膜的話,也是不可能實現的。而動態可重構技術的話只需與固件一樣,在存儲器上追加新的電路數據即可(圖4)。這樣便可延長一次投入的圖像處理LSI的“產品壽命”。

  實際上,富士膠片就曾表示,采用動態可重構技術的EXR處理器今后“還有進步的余力”。另外,由于無需在掩膜中嵌入電路數據,因此與通常的固件開發一樣,直到電子產品馬上要供貨之前,都可致力于電路構成的優化及驗證工作(圖4)。而且,缺陷的修正等也比硬連線電路容易得多注4)。

  注4)目前在MCU領域中,掩膜ROM產品已被閃存ROM產品取代,而在系列LSI領域中,硬連線電路向動態可重構技術的過渡也可以說是類似現象。

  除了一體機、攝像機及數碼相機等與圖像相關的電子產品之外,動態可重構技術今后還將充分利用上述可編程性,在其他電子產品領域取代硬連線電路及DSP。比如東芝表示,在無線通信領域的基帶處理電路方面,動態可重構技術對電路面積及耗電量也同樣有利。而且,隨著智能電話及平板終端越來越多地導入WAN及無線LAN等多種無線通信方式,該技術還有望配備到這些電子產品上。

STP引擎具有設計工具優勢,DAPDNA推出新版產品

  目前已進入實用階段的動態可重構技術有瑞薩電子的“STP(Stream Transpose)引擎”(基于原有的DRP)、東京計器的“DAPDNA”系列、索尼的“VME(Virtual Mobile Engine)”,以及松下的“D-Fabrix”等。此外,還有很多企業在自主研發相關技術,但真正使用到實際產品上的主要還是上述4種。

  其中,以外銷為提前穩步積累起采用業績的是瑞薩電子的STP引擎。以前已被索尼的多款廣播電視專業攝像機,以及風險企業Yoozma的數字電視發送器等采用,但2011年6月瑞薩電子自己宣稱,該技術還被采用到了消費類數碼相機上 注5)。

  注5)在動態可重構技術方面,瑞薩電子憑借出色的研發成果以及在圖像處理產品中的應用業績,于2011年5月獲得了日本電子信息通信學會頒發的“第47屆(平成22年度)業績獎”。在相關發布資料中,該公司稱STP引擎得到了數碼相機的采用。

  瑞薩電子并未公布具體都有哪些企業的數碼相機采用了STP引擎。但如前所述,卡西歐計算機和富士膠片近一年來相繼在自己的數碼相機產品上采用了動態可重構技術,由此來看,兩公司的數碼相機采用的很可能是STP引擎的衍生技術。

  雖然正在研發動態可重構技術的企業有很多,但站在包括設計工具在內的綜合觀點上,并以外銷為前提使該技術達到商用水平的,恐怕全世界只有瑞薩電子一家 注6)。

  注6)動態可重構技術的營銷難度要比普通處理器大,過去有很多企業都在相關業務上失敗過。比如,奧林巴斯著眼于在數碼相機等產品上的應用,于2002年設立了動態可重構技術的專業企業AOI技術公司,但之后因客戶拓展不利,該公司于2007年被解散。另外,開發出DAPDNA的IPflex公司也由于營銷失敗等原因陷入了破產。

  當然,也不能說卡西歐計算機及富士膠片在動態可重構技術的架構方面就毫無自主開發的可能性。但是,這兩家公司在動態可重構技術的基本架構方面并未取得類似專利,因此自主開發的途經頗顯薄弱。富士膠片雖然已就動態可重構技術在圖像處理中的應用方法申請了多項專利,但這些專利與架構并不相關 注7)。

  注7)富士膠片已就動態可重構技術在數碼相機領域的應用方法申請了專利,而且還在內窺鏡等醫療器械領域申請了同樣的專利。該公司今后將在所有圖像處理產品中采用動態可重構技術。

  索尼及松下開發的技術主要用于自己的產品,而東京計器的DAPDNA尚未達到能夠在ASIC上作為IP內核使用的設計水平。

  另外,卡西歐計算和富士膠片都未在這方面接受過《日經電子》的采訪,而且,對于自己的產品是否采用了瑞薩電子的STP引擎,這兩家公司和瑞薩電子都回答說“無可奉告”。

沿用高層次綜合工具

  瑞薩電子的STP引擎能夠將應用范圍從專業廣播電視設備穩步拓展至消費類數碼相機產品,其原因在于該公司在技術上有著豐富的積累。STP引擎本來是原NEC電子與NEC中央研究所共同開發的,包括改進后的技術在內的話,已擁有近15年的歷史。

  在設計工具方面,與其他眾多企業僅著眼于動態可重構技術進行開發相比,STP引擎以已經確立市場的、在ASIC設計領域積累了豐富業績的高層次綜合(行為級綜合)*工具為基礎。因此就STP引擎而言,雖然動態可重構技術的市場目前仍處于黎明期,但其設計環境的完善度已達到很高水平。

  在STP引擎中,瑞薩電子尤為重視的一點是,即使是不熟悉固件設計的普通軟件技術人員及算法設計人員,也可輕松地設計和優化動態可重構技術的電路。具體來說,除了能夠以高層次綜合工具為基礎利用C語言進行設計之外,最近還在DMA處理方面充實了各種模板,即使是不精通系統LSI的內部架構,也可輕松優化電路構成。

  一般而言,用動態可重構技術的運算器陣列開始實施數據處理時,需要利用DMA控制電路從主存儲器等的DRAM向運算器陣列的RAM單元及寄存器讀入數據。對這些從主存儲器轉移數據的操作實施優化的話,還會影響主存儲器的延遲時間以及內部總線的構成等,因此對普通軟件技術人員來說門檻較高。

  STP引擎將這些與DMA相關的處理事先匯總成了模板。這樣,便可輕松實施諸如將某項功能向什么模塊做分割并行化處理的全局性優化。比如,Yoozma的數字電視發送器,其數字電視的基帶處理當初需要使用4塊芯片的STP引擎。但后來通過使用模板嘗試多種模塊分配,最終將芯片數量優化為了兩塊(圖5)。

 
圖5:利用瑞薩電子的STP引擎實施優化的示例
圖中列出了微波數字電視發送設備的設計優化過程。在最初試行時使用4塊芯片的STP引擎,但最終優化為了兩塊芯片的構成。(圖片源自瑞薩電子)

DAPDNA也走向復活

  被富士施樂作為圖像處理加速器采用于辦公一體機等的東京計器DAPDNA系列也從暫時的動蕩中擺脫出來,正順利走向復活。開發出DAPDNA的原IPflex公司由于營銷戰略失誤等于2009年7月申請進入破產程序,在債務清理過程中,曾為DAPDNA用戶的東京計器并入了原IPflex公司的核心技術人員,并接手了銷售、開發及客服等全部業務。

  由于富士施樂等今后有意繼續使用DAPDNA,因此東京計器決定開發新版芯片。作為富士施樂采用的圖像處理芯片“DAPDNA-IMX”的后續產品,將投放“DAPDNA-IM2”(表1)。

 

  新版芯片在保持運算器數量與原產品同為1000個左右的同時,將制造技術從90nm工藝微細化到了65nm工藝,降低了制造成本,有望培育成贏利業務。與原產品相比,雖然運算器數量一樣,但工作頻率提高到了約1.5倍,性能更高。
 

此內容為AET網站原創,未經授權禁止轉載。
主站蜘蛛池模板: 成人97 | a级片免费观看视频 | 久久精品7 | 精品午夜久久网成年网 | 久久国产精品二区99 | 手机看成人免费大片 | 91免费永久在线地址 | 日韩性黄色一级 | 在线免费观看国产 | 亚洲综合日韩精品欧美综合区 | 日韩在线一区二区三区 | 131的美女午夜爱爱爽爽视频 | 美国一级大黄香蕉片 | 天天看片日本 | 性日韩精品 | 亚洲欧美中文日韩二区一区 | 国产三级久久久精品三级 | 日本黄网站高清色大全 | 久久免费精品视频在线观看 | 污美女网站www在线观看 | 欧美视频 亚洲视频 | 国产成人精品男人的天堂网站 | 全部免费毛片免费播放 | 高清日本在线成人免费视频 | 日韩一级片免费看 | 久久国产片| 99精品视频99 | 亚洲免费一级片 | 国产亚洲精品午夜高清影院 | 男人天堂视频在线观看 | 日韩视频观看 | 国产欧美日韩综合二区三区 | 免费观看一级欧美在线视频 | 日本免费观看的视频在线 | 日韩美女免费线视频 | 国产农村一二三区 | 在线看欧美成人中文字幕视频 | 在线观看中文字幕一区 | 久久久精品免费热线观看 | 在线视频精品一区 | 极品美女写真菠萝蜜视频 |