Google發展了一種產生圖像和影片遮罩的新方法,利用分層神經渲染,將影片中的物體和背景分開,產生稱為Omnimatte的遮罩,與典型分割模型不同之處在於,這個新方法所生成的Omnimatte不僅是物體本身,同時還能分離出和物體有關的其他細節,包括影子、部分透明的軟效果,甚至是輪胎摩擦地面所產生的煙霧,與傳統遮罩相同的地方是,Omnimatte為RGBA圖像,因此能夠用於廣泛的圖像和影片編輯工具
#看更多 https://www.ithome.com.tw/news/146514
rgba透明 在 Mina 安米娜 Facebook 的最讚貼文
近期最讓人驚艷的電影 天能 你看了嗎?
影片中順時鐘與逆時鐘同時進行的打鬥橋段,高度還原了時間逆行的整個過程,而不是直接轉移到過去的某個時間點,實在太讓人過癮
不禁好奇導演到底怎麼拍攝
導演也堅持能不用特效就不用特效,這部片特效場景不到300個,甚至比大多數愛情片還要少
🔸逆向打鬥畫面
我們可以看到演員透過長時間練習,做到逆向武打與肢體動作
🔸飛車追逐的畫面
原始翻車畫面為正拍,但周邊的車輛的確是倒著開。於是影片在經過剪輯之後,就可以形成翻車畫面為逆行,其他車輛則正常順行,如此就可以拍攝出順時鐘與逆時鐘同時進行的吸睛畫面
但要拍攝順時鐘與逆時鐘同時進行,沒有更簡單的方法了嗎?
Google和牛津大學研究人員提出的"時間重組術"(Retiming People in Video),他們訓練了一種深度神經網絡,學習如何將影片分圖層
相信有操作過Photoshop的人都知道,假設A圖層是父親影像,B圖層是母親影像,想要兩個兩人出現就必須把兩張圖層重疊,圖層的好處是什麼,如果其中母親燈光過暗,可以單獨把母親圖層拉出來調亮
同樣的道理也可以應用在影片中,不過調整的是時間,孩子們跳水的影片,原影片中他們是分別跳入水中,深度神經網絡調整不同圖層時間,成功的做到讓他們同一個時間點跳入水中
深度神經網絡在影片處理可以做到:
🔹調整影片部分人物的時間變慢或變快
🔹凍結時影片中部分人物的時間
🔹人物重疊,達到像是火影忍者影分身的效果
原理就是將影片中將每幀圖像分解為一組層,每個層由一個RGB彩色圖像和一個不透明遮罩(RGBA)組成
研究者不需要自己創造新的圖片或動作,他們唯一需要做只是拆開後,各組調成想要的時間,再合成一個新的影片
那你可能會問需不需要一個個去標記人事物,答案是否定的,"時間重組術"不需要手動註釋動態場景元素,例如,孩子們在水中濺起的水,陰影;模型會自主學習(self-supervised)到將與人物相關的場景分組重建,不需要額外的訓練或處理
研究人員想要創造超現實效果可以通過對層的簡單操作(可移除/複製/插入特定層/逆行/凍結)而產生
蠻有意思的研究,有興趣的朋友可以看原文喔,連結在下方
📖 References:
Layered Neural Rendering for Retiming People in Video
https://arxiv.org/pdf/2009.07833.pdf
#PyTorch
#Adamoptimizer
#NVIDIATesla #P100 #GPU
#12hr
rgba透明 在 柯文哲 Facebook 的最讚貼文
先前,有設計師利用中央氣象局的公開資料,自己設計一個民間版的氣象局網站,令許多人驚豔不已,發現原來政府網站也能做得這麼好看、好用。政府資訊公開是世界趨勢,我國在這方面也已起步,但還有許多資訊公開的形式,都還不是容易被傳播、分享使用的。
我們的團隊向來秉持一個精神,就是現在能做的,不用等到選舉完再來做。因此,我們與RGBA 網頁設計資源、零時前端教學松合作,將柯文哲官方網站的API(應用程式界面)釋出,讓設計師、工程師、自造者任意發揮。無論是做網站、做 App、甚至其他科技藝術的應用,都方便許多,而這些資料也會隨著我們的官方網站同步更新。至於有意願參與、但缺乏技術指導的市民,我們也舉辦了工作營。
在公開透明、全民參與的理念下,傳統「大政府」的思維應該要打破,領導者應提出方向、剩下的則讓民間高手自由發揮,不僅在執行上會比公部門更有創意、更多元,整個社會的創造力和效率也會全面開啟。
rgba透明 在 [css] 第28天rgba()和opacity这两个的透明效果有什么区别呢? 的推薦與評價
3. rgba() 一般作为背景色 background-color 或者颜色 color 的属性值,透明度由其中的 alpha 值生效,取值0-1;. 扩展: 1. transparent 也是透明,是个 ... ... <看更多>
rgba透明 在 CSS沒有極限- CSS3的漸層 - 卡斯伯Blog - 前端 的推薦與評價
+background-image(linear-gradient(bottom, #E80C7A,rgba(#E80C7A,.5), ... 而這個效果很特別他每個漸層顏色是設定50%有色彩,另外50%是透明,然後 ... ... <看更多>
rgba透明 在 便可輕鬆製造半透明色! 例如rgba(136, 153, 102, 0.267) 便 ... 的推薦與評價
【勿忘】 【CSS 中的Color 表示方式#RRGGBBAA #RGBA】 相信曾接觸過網站開發的朋友 ... 就是以#RRGGBB 的十六進制方式表示,但若然要使用透明顏色,你又知不知道要怎麼做? ... <看更多>