銘傳資工論文研討: Video Forgery and Motion Editing

課程：論文研討(一)
日期：101.9.21
時間：14:00PM~15:30PM
地點：S104
主題：Video Forgery and motion editing
講師：施國琛教授
作者：資工產碩一王雨喬

心得：

這次演講請到多媒體的專家-施國琛教授，主要在講Video Forgery，所謂的Video Forgery就是指一種把原本的Video內容透過altering、 combining或 creating等處理後得到新Video的技術，目的是為了偽造Video，基本技術分為以下四種：

Ø Object Tracking → to identify target object

Ø Video Inpainting → To remove the object

Ø Motion Interpolation → To change the behavior of object

Ø Video Planning and Special Effect Production → To create video from Video Database

圖(一)

講師投影片上舉了許多例子，一直問大家有沒有看到”鬼影”，如果有看到的話舉手，其中有幾個例子很令我印象深刻，例如有一個打桌球的影片，如圖(一)↑所示，將原本影片中的打桌球的人手上的球透過追蹤、去除、修補等步驟得到新的影像，但影片播放的時候，球雖然完全消失了，但原本有球的地方會有很不自然的”鬼影”，還有另一個例子是遊戲畫面中人物移動的影片，原圖如圖(二)↓所示，圖(三)↓是追蹤圖(二)中的人物，圖(四)為修補過後的圖，老師在播放(圖四)部分的時候，還特地暫停，暫停的時候完全看不出是修改後的圖，看不到哪裡有不自然的地方，表示如果不是做動畫的話改(人物消失)的很成功，但老師繼續播放的時候，修改的地方又會跟其他例子一樣出現”鬼影”，雖然這兩個例子鬼影很明顯，但老師還有舉其他改善”鬼影”問題的影片，看起來就自然多了。

圖(二)

圖(三)

圖(四)

除了動態的影片偽造，老師還介紹靜態影像的偽造，例如有一張背景為建築物的照片，那建築物有很多根柱子，原本的圖是圖中間有很大的一個東西遮住了約5根柱子，後來經修改圖中間的東西不見了，但"消失的很自然"，講師問我們有發現哪裡怪怪的時候，我還找不到不合邏輯的地方，後來他公布答案因為光照角度不同的關係，每根柱子的影子寬度要不一樣，但由於中間修補部分是複製來的，所以影子寬度會一樣，我才恍然大悟！講師也有講解為什麼會有這個不合邏輯的問題，因為圖修改的原理是因為它消失的部分是用原本圖的某一塊複製過去做修補，所以才會柱子的寬度都一樣，這次的講座使我受益良多！期待下次的講座。

以下分享一個相關技術的影片