1 / 31

資訊學院 研究能量與研發成果

資訊學院 研究能量與研發成果. 會議名稱： 碩士班甄試生說明會 報 告 人：陳玲慧教授 中華民國 95 年 12 月 01 日. 資訊學院研究群. 「多媒體工程研究所」研究群 Computer Vision and Image Processing 莊仁輝、陳稔、蔡文祥、林進燈、薛元澤、黃國源、陳玲慧、李嘉晃、林志青、荊宇泰、陳永昇、林正中、王才沛、林文杰 Graphics, Animation, and Gaming 施仁忠、莊榮宏、林奕成、吳毅成、孫春在、陳稔、林正中、林文杰 Multimedia and Contect Retrieval Systems

eitan
Download Presentation

資訊學院 研究能量與研發成果

An Image/Link below is provided (as is) to download presentation Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author. Content is provided to you AS IS for your information and personal use only. Download presentation by click this link. While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server. During download, if you can't get a presentation, the file might be deleted by the publisher.

E N D

Presentation Transcript

  1. 資訊學院研究能量與研發成果 會議名稱：碩士班甄試生說明會 報告人：陳玲慧教授 中華民國95年12月01日

  2. 資訊學院研究群 • 「多媒體工程研究所」研究群 • Computer Vision and Image Processing 莊仁輝、陳稔、蔡文祥、林進燈、薛元澤、黃國源、陳玲慧、李嘉晃、林志青、荊宇泰、陳永昇、林正中、王才沛、林文杰 • Graphics, Animation, and Gaming 施仁忠、莊榮宏、林奕成、吳毅成、孫春在、陳稔、林正中、林文杰 • Multimedia and Contect Retrieval Systems 蔡淳仁、劉啟民、傅心家、李素瑛、蕭旭峰、 蔡文錦、 彭文孝、陳穎平 • Digital Learning 曾憲雄、孫春在、陳登吉

  3. 資訊學院研究能量與研發成果 「電腦視覺與影像處理研究群」

  4. Computer vision and image processingResearch Directions (CV) • Camera calibration • W.H. Tsai, C.T. Lin, J.H. Chuang, Y.S. Chen, Z. Chen • 3D spatial model and object reconstruction • W.H. Tsai, C.T. Lin, J.H. Chuang, Y.S. Chen, Z. Chen • Location of moving robots • W.H. Tsai, C.T. Lin, J.H. Chuang • Navigation of automatic vehicles (with environment learning) • W.H. Tsai, C.T. Lin • Automatic tracing of target objects

  5. Computer vision and image processingSample R&D Results (CV) • Flying object automatic location and landing system • Car driving assistant system • Hand/finger-based pointing system • 3D motion capture system • Augment reality system

  6. Computer vision and image processingResearch Directions (IP) • Image enhancement and restoration • Y.T. Ching, T. Wang, Y.C. Hsueh, K.Y. Huang, Y.S. Chen, C.C. Lin , L. H.Chen, Z. Chen • Audio, image, and video compression • C.H. Lee, C.C. Lin, J.H. Chuang • Multimedia camouflage and digitalwatermark • C.C. Lin, L.H. Chen • Texture analysis and image segmentation • C.H. Lee, Y.T. Ching, L.H. Chen • Movie background construction • Z. Chen, J.H. Chuang, L.H. Chen

  7. Computer vision and image processingResearch Directions (IP) • Continuous speech processing and recognition • C.T. Lin, J.H. Chuang, K.Y. Huang

  8. Computer vision and image processingSample R&D Results (IP) • Image processing for digital camera • Image database searching • Intelligent video monitor system • DNA sequence determination • Chromosome recognition system • Brain-machine interface based on brain wave • DSP chip design and development

  9. Intelligent video monitor system 有別於坊間所開發之入侵者追蹤系統需多支攝影機搭配，本技術可即時單一攝影機動態追蹤，並包含人與非人的物體識別能力，大幅解決目前安全監控系統對於動態物體(如動物、震動及各種風吹草動等)的誤判行為，而此技術已移植到embedded system上，大幅度縮減硬體的空間與成本，同時利於實際建置。搭配通訊模組的設計，可透過GPRS將入侵人員的影像傳送至屋主及保全人員的手機或是PDA上，隨時隨地提供屋主即時的保全資訊以做出立即的反應。 RS-485 PTZ Camera 智慧型 入侵者追蹤器 無線網路模組

  10. Physiological Signals Brain-machine interface based on brain wave • 結合NBIC (奈米、生物、資訊、認知）技術，開發神經認知IT技術及所需之生醫訊號感測元件與裝置。 1. MEMS Sensors Data Acquisition 2. Wireless Transceiver Augmented Human Performance Physical States 3. Performance Monitoring MentalStates 4. Biofeedback

  11. Brain-machine interface based on brain wave • 結合NBIC (奈米、生物、資訊、認知）技術，開發神經認知IT技術及所需之生醫訊號感測元件與裝置。 1. MEMS Sensors 2. Wireless transceiver 發展人類神經、呼吸、心血管、與肌肉運動等生理系統之微機電感測晶片及無線傳輸晶片。 Physiological Data Acquisition Signals Augmented Human Performance 3. Performance Monitoring 結合不同生理感測訊號的量測與分析，及演算法以探討人類在各種視覺、聽覺及動感刺激下的生理反應與大腦認知/反應相關性。 4. Biofeedback 發展生物回饋技術，以在偵測出人類在心理或生理狀態產生不適時，自動選擇在最適當的時機給予最有效的回饋/刺激訊號。 Physical States Mental States

  12. Computer vision and image processing • Major projects • Construction of vision-based intelligent environment (2004-2008) (學界科專計畫) • W. H. Tsai, L. H. Chen, J. H. Chuang, Y. S. Chen • Intelligent transportation system (ITS) — Smart vision (2002-2006) (卓越計畫) • C. T. Lin • National digital archives program (2002-2007) (國家型計畫) • W. H. Tsai

  13. Computer vision and image processing • Plans in the near future • Super-sense interactive/intelligent environments • Image/video retrieval • Augmented reality system • Research on multi-view video processing

  14. 多媒體工程研究所電腦視覺與影像處理研究群 - 陳玲慧教授 • 研究興趣 • Multimedia Steganography: • Text, image video, audio • Video compression • H.264, MPEG4 • Content-Based retrieval • Video, audio, image • 2D- code • Pattern recognition: face, fingerprint

  15. 多媒體工程研究所電腦視覺與影像處理研究群 - 陳玲慧教授 • 近兩年計畫 • 一個高效率之MPEG-7紋理瀏覽描述子的計算方法及其紋理瀏覽和紋理檢索之應用,NSC,2003/8-2005-7 • 一個關於一般音訊資料之音訊分類，音訊分段和音訊檢索之研究，NSC,2005/8-2007-7 • 音訊關鍵字偵測，經濟部科專,2003/5-2004-4

  16. 多媒體工程研究所電腦視覺與影像處理研究群 - 陳玲慧教授 • 研究成果 • Content-Based retrieval system • Trademark, color image, texture, Audio • Two patents for 2D- code • 安全自由碼 • 一種個人資料身份證明文件認證之安全介面 • Face location • Sprite generator based on MPEG4 • Fast algorithm for H.264

  17. Color image retrieval system • Retrieval result of the big red flower Query

  18. 安全自由碼之設計及解碼 Robust for the following distortion:

  19. Sprite generation

  20. 多媒體工程研究所兼資工所甲組電腦視覺與影像處理研究群–陳稔教授多媒體工程研究所兼資工所甲組電腦視覺與影像處理研究群–陳稔教授 研究領域: 電腦視覺與視訊監控、影像處理、虛擬實境與動畫、圖像辨識(人臉、指紋) 目前研究計畫:

  21. 最新人臉辨識成果–陳稔教授 (搜尋人臉特徵點與臉孔主軸之方位) (不同姿態臉孔比對示意圖：三條紅線檢驗圖中右眼、鼻尖、唇口特徵點對應)

  22. 近年來研究工作項目–陳稔教授 下列研究項目之展示Demo Video，請看系上網站或聯絡本人(Office: Room 523,Mobile:0968674701) • Augmented VR 虛與實融合 (余國華同學)    • 利用數位相機拍攝手法建立三 維人頭像 (吳昶澔同學) • 人臉辨識 (鄭龍凱同學) • 用攝影方式建構 3D Object Model (周宏隆同學) • 360 度環場拍攝 (謝耀賢、 孫樹國同學) • 影像中不同景深物體切割 (趙仁孝同學)  • 人體運動偵測與動作分析 (顧正偉、紀文原同學) 

  23. 多媒體工程研究所電腦視覺與影像處理研究群- 陳永昇教授 • 研究興趣（生醫訊號、醫學影像、電腦視覺） • 腦部結構分析 • 腦部皮質分割與模型重建、腦圖譜 建構、腦部結構型態測量等 • 腦功能研究 • 腦電波腦磁波訊號分析、腦功能造 影、腦機介面系統等 • 視訊監控 • 相機參數校正、環境三維模型重建等

  24. 多媒體工程研究所電腦視覺與影像處理研究群- 陳永昇教授 • 近兩年計畫 • 磁振造影與腦磁波圖/腦電波圖之自動化整合,NSC,2003/8-2004/7（主持人） • 運動相關腦磁波之腦部信號源動態造影,NSC, 2003/8-2004/7（共同主持人） • 利用幾何特徵擷取法以評估嚴重急性呼吸道症候群（SARS）胸部X 光表徵,榮總台聯大,2004/1-2004/12（主持人） • 以視覺為基礎之智慧型環境的建構四年計畫,經濟部, 2004/5-2008/4 （子項計畫共同主持人） • 腦部活動之電生理訊號源模型建立、估算、與分析,NSC,2004/8-2005/7（主持人） • 利用皮質表面腦功能造影進行聽覺皮質頻率相依結構之群組分析,NSC, 2004/8-2005/7（共同主持人）

  25. 多媒體工程研究所電腦視覺與影像處理研究群- 陳永昇教授 • 研究成果 • 腦圖譜之建構 • 腦電波活動源正向模型 • 利用腦電/磁波最大對比光束構成法來進行腦功能造影

  26. 多媒體工程研究所電腦視覺與影像處理研究群- 王才沛教授 • 最近研究計畫 • 基於視訊分析之嬰幼兒弱視因子自動化篩檢系統 • 根據眼睛瞳孔之彩色影像判別嬰幼兒是否有可能導致弱視的視力問題，例如高度近視或遠視、視差、斜視、先天性白內障等。 • 淺地表下物體非接觸式偵測技術之信號處理 • 分析包括合成孔徑雷達、聲波、紅外線攝影等之信號以分辨地表下是否有物體及其性質。 • 研究興趣 • 影像分析及物件識別技術。 • 醫學影像分析及電腦輔助診斷。 • 分群法在影像處理之應用。 • 多媒體內容搜尋。 • 物理系統訊號分析。 • 基於物理原理之影像合成技術。

  27. 受測者 Video攝影機 光源 弱視因子自動化篩檢 特徵擷取 電腦視力診斷分析 篩檢結果判別

  28. 第二代可延伸人機介面系統(XMMI v2.0)由行動電話人機介面系統(MMIS)、行動電話人機介面描述　語言(MMDL)與編輯系統構成，如右圖1所示。使用者可用編輯系統　快速地設計行動電話人機介面並產生MMDL檔案，後將MMDL檔案　 圖1 XMMI v2.0架構圖 上傳至使用MMIS的行動電話上，即完成人機介面的修改。 圖2 編輯系統(SonyEricsson T290i之狀態完成圖) 圖3 功能選單之畫面 行動裝置可延伸人機介面系統Extensible MMI system for mobile device 主持人：李嘉晃 教授chl@cis.nctu.edu.tw 研究生：黃明超, 林建良　 為使行動電話人機介面之畫面內容能產生豐富的外型變化，且能自訂功能選單以簡化操作方式，因此本計畫設計XMMI 2.0讓使用者可藉由修改MMDL文件，而自訂行動電話人機介面。 在MMIS元件及相關圖片均具備之情況下，編輯系統只需花費1小時即可建構出SonyEricsson T290i所有功能選單之人機　介面狀態，如左圖2所示，共計約40個　狀態。人機介面狀態包含待機狀態、表格式選單及項目清單等三種。建構過程中，多數時間花費在鍵入項目清單之文字內容上。本系統與傳統的人機介面系統之差異在於更動後不需重新編譯連結。 右圖3用以說明更改人機介面狀態達到　使用者個人化行動電話人機介面。 右圖之Phonebook及Messages為SonyEricsson T290i之九宮格選單畫面， 經過簡單的操作，即可將其更換為動畫選單。整個變更之實作，在已具備MMIS元件及相關圖片之情況下，僅需花費10分鐘便可完成此變更動作。

  29. 林文杰助理教授多工所(&資工所甲組) 研究領域:影像處理、電腦視覺、電腦圖學、電腦動畫 • Texture Analysis and Synthesis • Texture synthesis evaluation • Dynamic texture tracking • Texture-based image/video editing • Human Motion Tracking and Analysis

  30. Dynamic Texture Tracking Tracked lattices Visibility map Input Video Output Video

  31. Texture-based Video Editing Self-occlusion effect is preserved in letter ‘U’ Input Video Output Video

More Related