研究方向初期包括計算機輔助設計的演算法研究,後來以 VLSI 架構設計為基礎,以數位信號處理演算法及視訊處理為骨幹,開發多媒體通訊及智慧型信號處理 (Intelligent Signal Processing)之各類型軟硬體應用系統。
可概分為 DSP System and Algorithm 以及 DSP Architecture and IC Design 兩個部份。DSP System and Algorithm部分主要是對系統分析及演算法的研究,以PC或工作站為發展平台。DSP Architecture and IC Design主要是針對演算法提出有效率的硬體架構設計,最後以ASIC或DSP晶片實做。可分為幾個主要的專案:(1)MPEG-2視訊壓縮。MPEG-2解碼器已經完成,目前針對MPEG-2測試pattern提出一個有效的解決方案,解決模擬時間過長的問題。(2)MPEG-4視訊壓縮。MPEG-4是一個新的視訊壓縮標準,加入了物件(Object)的觀念,有別於之前以Frame為主的壓縮觀念。因此,專案之一便是設計一個MPEG-4 Shape Codec Engine。又因為MPEG-4將應用於無線傳輸,對於抗雜訊的考量加入不少技巧,這將反映在MPEG-4 Bitstream Parser的製作上。經由整個系統中核心模組的個別研發,完成一個MPEG-4 Codec當然就是遠程的目標。(3)JPEG系列的靜態影像壓縮標準。 (4)智慧型影像處理。賦予機器能看、能辨認的智慧一直是人們的夢想,因此移動物體切割與追蹤、人臉辨識等應用一直是很熱門的研究主題,而MPEG-4 Object Coding的要求更是直接對Video Segmentation的一種迫切需要,主要研究方向就是發展自動video segmentation演算法,把video sequences中有興趣的部分切割出來,以利後續的壓縮或辨識等處理。(5)數位信號處理器(Digital Signal Processor, DSP)與多媒體處理器(Media Processor)的研發。隨著Single Instruction Multiple Data (SIMD)、Very Long Instruction Word (VLIW)等架構的提出,DSP的效能不斷突破,許多原先必須藉由ASIC才能達成的運算,已可以由DSP單獨完成,加上DSP擁有極大的彈性(flexibility),對於演算法的更改,可以經由修改程式來快速反應,因此,發展性極大。DSP在業界已經有相當的發展,因此,實驗室主要針對核心部分,對某些特定、常用的演算法加速的硬體架構做研究,主要專注於多媒體處理器。(6)Re-configurable Computing。在ASIC與處理器(General Purpose Processor)這兩個極端之間,存在了一個折衷的方案,這就是結合了FPGA可程式化與ASIC高效能優點的Re-configurable computing概念,有別於純粹FPGA,Re-configurable computing 將嵌入處理器,因應未來系統晶片的趨勢,成為可程式化的系統晶片。