[閒聊] 將二次元老婆畫像轉換為立體圖片

[TypeCurry (Norman)]

台灣清華大學與維吉尼亞理工大學的學者在今年CVPR 2020發表的論文
「3D Photography using Context-aware Layered Depth Inpainting」
除了宣稱其將平面圖片轉為3D圖片的技術較其他家更沒有破綻，
https://www.youtube.com/watch?v=8Lg_jv_4WkU
還在前陣子把程式放到Google Colab上公開，
讓人自己抓來試看看，日本那邊已經有不少人在玩：
https://twitter.com/yoshiwo_konogi/status/1250630253795368960
https://i.imgur.com/HhliBI5.mp4



使用很簡單，只要到論文作者的Github頁面下方點選Demo連結，
https://shihmengli.github.io/3D-Photo-Inpainting/
另存專案後再一個個點選執行，並上傳圖片就行了，
(不知如何操作可見個人所寫之步驟：https://typecurry.com/?p=8525)
渲染出來的立體圖片有circle、swing和zoom-in三種角度，
拿一些圖片隨便嘗試的效果：
https://i.imgur.com/ZrsBOJf.mp4
https://i.imgur.com/ubqHXAM.mp4
https://i.imgur.com/B9YQg16.mp4


有些成品效果不賴，有些就比較差一點，
可能要多上傳不同圖片互相比較，才曉得哪種轉換起來比較好，
有興趣把硬碟圖片轉成3D攝影的版友，或許可以抓下來嘗試試看 ww

--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 86.171.61.15 (英國)
※ 文章網址: https://www.ptt.cc/bbs/C_Chat/M.1587230075.A.B72.html
※ 編輯: TypeCurry (86.171.61.15 英國), 04/19/2020 01:16:22
推 stvn2567: 不錯
推 wl2340167: 變女欸
推 xiangying: 我老婆是真實存在的.jpg
               → 轉換 →我老婆是真實存在的.mp4
推 higameboy: https://www.youtube.com/watch?v=Y96WY5Do_bs
※ 編輯: TypeCurry (86.171.61.15 英國), 04/19/2020 01:34:55
推 efkfkp: 自動生成背景景深與物件分層跟強化透視的感覺?
應該就是這樣，可惜目前還只有三種運鏡，未來不知會否有可自訂鏡頭軌跡的模型。
推 arl4565060a: 伊莉雅讚
※ 編輯: TypeCurry (86.171.61.15 英國), 04/19/2020 01:38:49
推 CactusFlower: 你們在說什麼呢 我老婆本來就是真實存在的啊！！！
2D真實存在→3D真實存在這樣(誤)
→ qqq3892005: 第2張假假 第3張有點猛
推 hankiwi: 背景和透視畫的自然的作品效果最好
前景後景分很開的，效果就滿自然，
https://www.youtube.com/watch?v=QE4p9tQiXo0
但背景內容若太複雜，目前還是很難填補的樣子
推 ryohgi: 這個跟fb圖片那個技術不同嗎
推 god78987: 第3張的燈柱被默認是背景的樣子 會扭曲
推 ralfeistein: 粉專怪奇研究所的圖原來是套這個程式啊 想說怎麼超厚
→ ralfeistein: 工的畫立體圖
推 KuBiLife: 可惡 人看起來還是很平啊
沒辦法，剛好挑到伊莉雅和Saber，本來就(ry)
※ 編輯: TypeCurry (86.171.61.15 英國), 04/19/2020 05:25:15
推 jimmyVanClef: 以後在也沒有人能嗆我婆二次元了！
推 dodomilk: 那麼下一步就是把人體各部位分開，讓該搖的地方搖起來
推 donkilu: 仔細看 他補完的部分偶爾還是會有破綻
推 atbhao05: 讚 這個研究拯救了很多人
推 Petrichor: 哇，CVPR誒
推 Qorqios: !樂
推 SeijyaKijin: 宅宅福音