Image/Video Segmentation and Annotation by Social Media Analysis

課    程 : 論文研討
班    級 : 資工產碩二
日    期 : 100年 10月14日
演講者 : 中正大學資工系朱威達教授
題    目 : Image/Video Segmentation and Annotation by Social Media Analysis
姓    名 : 魏早達
學    號 : 99366512

　　本週的演講讓我體會到作研究時，那種如何化繁就簡，再由簡逐步往繁向前推進。朱教授以旅遊媒體為出發點所引發的一連串研究，讓我覺得很多研究的主題，其實在平時的日常生活中隨手可得，再運用專業的知識及研究方法，便可美化人們的生活品質。

　　從一般人出去玩，往往會一面拍照一面拍影片，而在我們拍影片時，往往到不同的點便拍一連串影片，事後要看每一段影片都要重頭找起，或者用後製軟體去作不同場景的切割，而拍照往往會有到不同的景點便以代表性的景物作拍照。如果可以運用這些景點相片用來作為旅遊影片場景的偵測, 將同樣景點聚集在一起，並藉由相片來分割影片的場景，就可以達到這個目的。

　　首先需對影片分析關鍵畫面，用模糊邊緣來過濾，然後對關鍵畫面及相片取特徵點，再以k-means分成k 群，並且形成visual words得到visual word histogram作為相似度的判定標準，其概念是：

1.          當某些東西在照片和影片都出現的話代表它是重要的東西, 可以拿來當摘要..

2.          如果一個shot在很多地方都match 到便要留下來。

於是可串聯起相片和影的關聯性以及場景的群聚及切割。

　　當然朱教授又想到同樣的方法也可以運用網際網路的照片作為自己影片的切割，還有相片摘要的產生等應用，這真是一法通萬法通的作法