顯示廣告
隱藏 ✕
回列表(←)
Disp BBS guest 註冊 登入(i) 線上人數: 863
首頁(home) 上頁(↑) 下頁(↓) 末頁(end)
※ 本文為 TLdark 轉寄自 ptt.cc 更新時間: 2020-05-28 01:37:47
看板 C_Chat
作者 cybermeow (北歐組一生推)
標題 [閒聊] 訓練了一個生成凱留頭的模型
時間 Mon May 25 20:33:47 2020

廢話不說先直接上結果

使用範例:

https://i.imgur.com/I4xNU6A.jpg
[圖]
 

https://i.imgur.com/eiag3pK.jpg
[圖]
 

https://i.imgur.com/oOHB7aF.jpg
[圖]
 

https://i.imgur.com/BBR81CN.jpg
[圖]
 

隨機生成的圖 (沒有挑選過而且模型還沒訓練到收斂所以並沒到非常好

https://i.imgur.com/dM3QZFC.jpg
[圖]
 


研究動機:

近年凱留接頭日益盛行，然而接頭本身耗費人力，不僅僅要求操作者的PS技巧
而且接頭素材有限，對於一張給定的圖，不一定擁有適當的頭來接
如果想要上網尋找最合適的頭又需要額外的付出
同時以凱留的角度而言，雖然有很多身體，可是頭卻是固定幾個，相當的不平衡
我們希望此研究能夠拋磚引玉，引起更多人對於凱留接頭全自動化這個問題的重視


方法:

先跳過，有人有問再說
基本上都是拿現成的程式碼直接使用
這只是一個極短時間娛樂性質的 Project
接下來有空會考慮做一些比較實用而且效果也比較好的(一樣是動畫相關的)東西
真的有成品的話應該也會 release source code 和訓練好的模型甚至架設網站等等
歡迎有興趣的人來討論

另外推薦幾個個人覺得「實用」的深度學習應用到動畫上的模型
Tagger:
https://www.reddit.com/r/MachineLearning/comments/edzqp8/p_deep_danbooru_girl_
image_tag_estimation_source/
Decensor:
https://github.com/natethegreate/hent-AI
GitHub - natethegreate/hent-AI: Automation of censor bar detection
[圖]
Automation of censor bar detection. Contribute to natethegreate/hent-AI development by creating an account on GitHub. ...

 
一般而言 reddit/animeresearch 上面有很多東西  大家可以試著去挖寶



置底

https://imgur.com/pbBiSGu.jpg
[圖]
 

--
北歐組一生推
https://imgur.com/ydMoryp.jpg
https://imgur.com/njHa0OA.jpg
https://imgur.com/KVrWmNb.jpg
https://imgur.com/leUc4jP.jpg
https://imgur.com/2UN6JMx.jpg

--
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 36.225.166.20 (臺灣)
※ 文章代碼(AID): #1UoxitUN (C_Chat)
※ 文章網址: https://www.ptt.cc/bbs/C_Chat/M.1590410039.A.797.html
推 Golbeza: 這到底在幹嘛1F 05/25 20:34
推 s87879961: 兄弟  不要這樣浪費才能阿www2F 05/25 20:34
→ waitan: 接頭霸王產生器2.03F 05/25 20:34
→ zxcv070801: 有東西4F 05/25 20:35
推 dodomilk: 有趣XDDDDDD5F 05/25 20:35
→ waitan:  https://i.imgur.com/BsWBT7G.jpg6F 05/25 20:35
[圖]
 
推 doggy10454: 太…太強啦7F 05/25 20:36
推 DDM76: 我覺得我應該推一下8F 05/25 20:36
推 melzard: 你會不會是人類史上第一個用凱留發論文的人類R9F 05/25 20:36
推 white841230: 推10F 05/25 20:37
推 rickydai888: 這篇有發展潛力 前排插眼推個11F 05/25 20:37
推 ernova831: 你到底在幹嘛...12F 05/25 20:37
推 guogu: 殺小w13F 05/25 20:38
推 fragmentwing: 太強了吧 你是要發論文嗎14F 05/25 20:38
推 littlebug421: 浪費才能(稱讚意味)15F 05/25 20:39
推 highwayshih: 浪費才能欸XDDDDDDDDDDDDDDDDDDDD16F 05/25 20:39
推 ryohgi: 浪費才能系列XDD17F 05/25 20:40
推 Ttei: 再不推就準備被凱留換頭啦18F 05/25 20:40
推 nahsnib: 這就是傳說中的scp-k，自動將識別到的人型生物頭部替換19F 05/25 20:41
→ sunshinecan: 不要浪費才能好嗎 XDDD20F 05/25 20:41
推 fakinsky: ?????21F 05/25 20:41
推 a1216543: 督丟校欸XDDD22F 05/25 20:41
推 a2470abc: 有沒有模型架構能看啊 好像有點屌23F 05/25 20:41
這個就stylegan2直接train而已
換頭的部分encode回latent space找生成裡面接近的
最後接頭還是自己P
因為幾乎都用現成的code所以髮色跟貓耳換的時候效果常常不好
接下來應該會考慮改成image to image translation的系列來做
先translate一次頭再自動處理artifact搞不好就能整張自動換了?
推 Erichikaunkr: ？？？？24F 05/25 20:42
推 tw15: 靠凹XD25F 05/25 20:43
推 evan09900966: 讚26F 05/25 20:43
推 LovelyCS: ？？？27F 05/25 20:43
推 a1l12: ???!!!!!XDDDDD28F 05/25 20:44
推 naya7415963: 我看了什麼...29F 05/25 20:45
推 Anemoneheart: ...30F 05/25 20:46
※ 編輯: cybermeow (36.225.166.20 臺灣), 05/25/2020 20:50:42
推 lcw33242976: 好猛XDDD31F 05/25 20:47
推 LANJAY: 你是要寫論文嗎？不要浪費才能啦XD32F 05/25 20:48
推 lin79529: 浪費才能w33F 05/25 20:48
推 killuaz: 你接頭系XD34F 05/25 20:48
推 Reshiram: 這是用卷積做的嗎 好酷www35F 05/25 20:49
推 fragmentwing: 所以是先找脖子→脖子角度→自動配對縮放大小接頭嗎36F 05/25 20:49
推 kinomon: 好37F 05/25 20:49
推 efkfkp: 這三小，博士快回去寫論文好嗎XD38F 05/25 20:49
真的NeurIPS deadline快到了
推 nebbiabards: 無限頭製欸39F 05/25 20:49
推 vincentwg: <接頭霸王之實際應用>40F 05/25 20:51
推 ases60909: 發paper啦41F 05/25 20:51
推 Authsty: ??42F 05/25 20:51
推 Erichikaunkr: 咦 原來還是要自己P喔XD43F 05/25 20:51
可以圖片直接換但因為目前沒有segmentation mask效果不好(就正方形換掉)
希望有人可以訓練一個不然自己要試著weak supervise一個
推 a123444556: 浪費才能文+144F 05/25 20:52
推 redhen0857: 不要浪費才能45F 05/25 20:52
推 q0928755515: 兄弟....46F 05/25 20:52
推 leftside: 要開發出新的固有結界了47F 05/25 20:52
推 Zerogos: 這個太強了，不推不行48F 05/25 20:53
推 superpaden: 浪費才能欸49F 05/25 20:53
推 hugowind: 斯巴拉系!!50F 05/25 20:53
推 peter0318: 推 笑死XD51F 05/25 20:53
推 longkiss0618: https://i.imgur.com/3l8LQ5U.jpg52F 05/25 20:53
[圖]
 
推 doraemon8709: 浪費才能XD53F 05/25 20:55
※ 編輯: cybermeow (36.225.166.20 臺灣), 05/25/2020 20:55:11
推 gggaaammm: 7777777754F 05/25 20:55
推 knight791211: 果然西洽充滿各種天才55F 05/25 20:55
推 uuhao: 你是把接好頭的照片跟原本的照片一組來當訓練資料？56F 05/25 20:56
→ uuhao: 讓他學習接頭的方式？
因為頭是生成的所以可以想像成生成的頭自己的角度之類的就自己對了
推 allanbrook: XDD 不要搶我們改圖的人飯碗好嗎58F 05/25 20:58
推 ikaros35: 類似cycle GAN的模型嗎XD59F 05/25 20:59
這是我下一步打算做的抱歉讓你失望了
推 aOwOa: 之前學稀疏矩陣的時候就覺得影像處理這塊的發展比我想像中60F 05/25 21:01
→ aOwOa: 強大很多
推 find64324: 三小R62F 05/25 21:02
推 ShibaTatsuya: 笑死 浪費才能63F 05/25 21:03
推 ZongKenGG: 你在幹嘛？？？？64F 05/25 21:03
※ 編輯: cybermeow (36.225.166.20 臺灣), 05/25/2020 21:05:15
推 Sacral: 浪費才能啦XDDDD65F 05/25 21:04
推 twosheep0603: 有沒有想過利用類似凱留MMD模型大量生成不同角度的66F 05/25 21:04
→ twosheep0603: sample呢 感覺可以更快收斂
怕會有嚴重的distribution shift而且個人沒使用mmd的經驗
不過應該可以特別設計模型來處理
※ 編輯: cybermeow (36.225.166.20 臺灣), 05/25/2020 21:11:13
推 e2167471: what are you doing68F 05/25 21:09
推 asderavo: 有內味了69F 05/25 21:09
推 aegisWIsL: 有夠浪費才能xD70F 05/25 21:13
推 cross980115: 全自動接頭霸王產生器 指日可待？71F 05/25 21:15
推 fate111085: 卡等GAN版本 有搞頭72F 05/25 21:15
推 Youmukon: 標靶換頭73F 05/25 21:19
推 overcame: 三小啦XDDDD74F 05/25 21:23
推 Tiamat6716: 迷失接頭75F 05/25 21:23
推 jackwula9211: 你論文是不是卡住了才跑來做這個？76F 05/25 21:25
→ koty6069: 浪費才能77F 05/25 21:26
推 SoQXuanChi: 文明的進步78F 05/25 21:27
推 ahw12000: 讚啦 完美凱留世界79F 05/25 21:31
推 ss77995ss: 推80F 05/25 21:37
推 danielqwop: 希望這能讓你的論文找到靈感XD81F 05/25 21:40
推 Derriclc: 幹 笑死 我沒看也沒玩公連 都快變凱流粉了82F 05/25 21:40
推 iamnotgm: 有創意XD83F 05/25 21:43
推 jjimonkey: 浪費才能XDD84F 05/25 21:47
推 mokissru: 浪費才能XDDDD85F 05/25 21:47
推 dangerousair: 不順便把簽名檔都換一次頭嗎xdd86F 05/25 21:48
推 gbls9527341: 完美凱留世界87F 05/25 21:48
推 a195732684: 浪費才能啊你88F 05/25 21:50
推 leion237: 真接頭霸王89F 05/25 21:52
推 WindSucker: 天網90F 05/25 21:54
推 QT1020: 這三小XDDD91F 05/25 21:54
推 qn123456: 接頭霸王2.0 XD92F 05/25 21:56
推 ehentai: 百推之前推一個93F 05/25 21:57
推 bomb1000: 太神啦 最近也在做機器學習專題 是個菜鳥 踩了好多坑XD94F 05/25 21:58
推 uohZemllac: 野生的才能跳出來了！！95F 05/25 21:58
→ assassin762: 三小96F 05/25 21:58
推 Ikaros2601: 全自動凱留大接頭時代來臨喇97F 05/25 21:59
推 Geiwoyujie: 這有點神 XDDD98F 05/25 21:59
推 enders346: wwwww99F 05/25 22:01
推 DeaGoo: 我看了三小100F 05/25 22:03
推 liyikisen: 全自動接頭 太神啦101F 05/25 22:03
推 kerorokuzo: 請收下我的膝蓋102F 05/25 22:03
推 slimc0527: 不要浪費才能啊103F 05/25 22:10
推 direct: 接頭霸王產生器in凱留104F 05/25 22:11
推 ga652206: 昔日有自動功德機 現在有自動接頭機105F 05/25 22:12
推 phyBomber: 吃飽太閒喔106F 05/25 22:13
推 mikeneko: J三小107F 05/25 22:18
推 g5637128: 三小108F 05/25 22:18
推 Jabarkas: 接頭論文！109F 05/25 22:20
推 iam60805: 可以再發一篇文詳細解說訓練過程嗎，想瞭解110F 05/25 22:21
推 HHH555JJJ: XDD 推111F 05/25 22:21
推 nickely: ？？？？112F 05/25 22:22
推 gincod: 大老113F 05/25 22:23
推 xsdferty035: 有github能看嗎（X114F 05/25 22:24
→ cities516: ptt臥虎藏龍115F 05/25 22:24
推 pepro: 哈哈哈哈 動機有了，接下來該寫文獻回顧了吧116F 05/25 22:25
推 r901700216: 接頭學家是你？117F 05/25 22:27
推 y1896547: XD118F 05/25 22:28
推 roea68roea68: 接頭霸王119F 05/25 22:28
→ qqq3892005: 才能大浪費120F 05/25 22:30
推 a25785885: 太閑484121F 05/25 22:31
推 s1326520: 接頭霸王產生器122F 05/25 22:34
推 kele1206: XD  ←這是讚美123F 05/25 22:36
推 greg90326: 草124F 05/25 22:37
推 DMGA: yolo學一個掃含頭髮延伸的頭切出來再gan回去呢？125F 05/25 22:39
推 ewqxz: 接頭博士126F 05/25 22:42
推 gungunme5566: 我就接127F 05/25 22:42
推 wasgavin0410: 真的好猛  這個已經吊打我的畢專了128F 05/25 22:44
推 max410286: meeting的時候跟老闆報告一下這周進度(接頭)129F 05/25 22:51
推 tobbaco: 全自動街頭霸王產生器 指日可待130F 05/25 22:55
→ tobbaco: 人被逼急了總是會做一些奇怪的東西
推 QB5566: 高…高手132F 05/25 22:57
推 WLR: 科技接頭XD133F 05/25 22:57
推 davidash: 也太強... @@134F 05/25 22:59
推 RLH: 這是什麼？135F 05/25 23:01
推 leon4287: J三小136F 05/25 23:03
推 rumirumi: 真超級接頭霸王137F 05/25 23:08
推 seatan: 我的天w138F 05/25 23:08
推 jacklinjia: 不要浪費才能啦XDD139F 05/25 23:10
推 atbhao05: 封你為C洽街頭霸王140F 05/25 23:10
推 converse0201: 基於深度學習之2D人臉自動生成研究141F 05/25 23:13
推 jason7086: 神142F 05/25 23:15
推 forsakesheep: 不要浪費才能阿阿阿143F 05/25 23:16
推 sophigo: 論文卡住時會開始做其他有的沒的 我懂XD144F 05/25 23:23
推 rabbithouse: 1970：未來的人一定會發明出飛天車 2020：145F 05/25 23:38
推 maple3142: 太強了146F 05/25 23:43
推 orion1991830: deepfake147F 05/25 23:45
推 rabbithouse: 話說多人那張圖 模型有認出凱留本人 莫名好笑XD148F 05/25 23:45
推 Merman19: 封你為 接  接   接頭霸王149F 05/25 23:47
推 passioncraig: 植基於類神經網路之街頭霸王自動接頭生成應用150F 05/25 23:53
→ summerkitten: 接頭霸王！！151F 05/25 23:54
推 zx8967: 不愧是PTT (感嘆152F 05/25 23:58
推 sochensun92h: 神人給推 真· 接頭霸王153F 05/25 23:59
推 ad0101: ？？？？154F 05/26 00:06
推 ken52011219: 幹你有病 笑死155F 05/26 00:07
推 xkiller1900: 誰在說ptt不是學術論壇啊，我他媽跟你急156F 05/26 00:07
推 nchuTim: 太強了~157F 05/26 00:16
推 anna89: 淦，有夠浪費才能，接頭霸王XDDDD158F 05/26 00:19
噓 Tr3vyy: 中國爛梗還一直用159F 05/26 00:23
推 zmcx16: 推街頭霸王XDD160F 05/26 00:26
推 hj258369: 接得不錯161F 05/26 00:31
推 notneme159: 推個162F 05/26 00:46
推 cicini: 1970:AI會消滅人類！ 2020:163F 05/26 00:51
推 Noxus: 麻美夏桀笑死164F 05/26 00:59
→ Noxus: 學姐
推 et310: 我覺得我應該推166F 05/26 01:02
推 ack0011: 做成病毒去把別人電腦裡的照片都換頭167F 05/26 01:02
推 st06208815: 三小啦wwqwq168F 05/26 01:08
推 Chenih: 笑死169F 05/26 01:10
推 moon1000: 浪費才能170F 05/26 01:16
推 Lucas0806: 閣下您是不是本家論文生不出來才會想要靠這個生成器轉171F 05/26 01:21
→ Lucas0806: 換思路刺激靈感啊？
推 bollseven: 天才 都忘了ptt是學術論壇！173F 05/26 01:23
推 jack70134: 先朝聖174F 05/26 01:33
→ harryzx0: 浪費才能XDD175F 05/26 02:01
→ qwer880506: 雖然是接頭  但可不是鬧著玩的176F 05/26 02:13
推 Chikarable: 研究動機 哈哈哈177F 05/26 02:18
推 starian: 靠 我到底看了三小178F 05/26 02:51
推 rickphyman42: 兄弟不要浪費才能啊179F 05/26 02:58
推 peter105096: 發paper 發paper180F 05/26 03:07
推 AlvaroMorata: 神神神181F 05/26 03:08
推 Deparic: 浪費才能wwww182F 05/26 03:31
推 xyz159632001: 笑死183F 05/26 03:39
推 ng1life1: 笑死184F 05/26 04:27
推 greed3819: 想到上學期訓練一個手寫辨識的Ai 弄到快暴斃185F 05/26 04:31
→ jerry123: 可參考這篇 https://blog.csdn.net/u011732139/article/186F 05/26 05:13
→ jerry123: details/70215732 把人臉提取的方法，提取後做 image-to187F 05/26 05:13
→ jerry123: -imag translation 再貼回原本圖片上，最後再接幾層Conv
→ jerry123: Layer 讓接頭處合理化。CycleGAN 要較多的 unpaired dat
→ jerry123: a訓練資料才能做的好，數量過少會有 mode collapse 的
→ jerry123: 問題，臉部五官因變動參數較少，建議做 data augmentati
→ jerry123: on 及往遷移學習的方向考慮。
大方向是打算這樣做
可能試試看用few shot的方式能不能做出動畫的deepfake
不過我很缺resources更缺時間就是
到時候先跑跑看deepcreampy的inpainting能不能處理接頭銜接問題
雖然平常都拿來解碼 (逃
噓 togs: 我覺得是時候我該下跪了193F 05/26 06:16
推 cyclone055: 你讓我早上看了什麼www194F 05/26 06:28
噓 ym951305: 不行195F 05/26 06:56
推 jimmyVanClef: 到底在幹嘛wwwwww196F 05/26 07:26
推 yoyo83117: 浪費才能197F 05/26 08:05
推 ggyyhippo: 兄弟 你是多喪心病狂想要做這東西出來啊XDD198F 05/26 08:13
推 purplemagic: 浪費才能199F 05/26 08:36
推 berice152233: 笑死200F 05/26 08:37
推 enderboy7652: 浪費才能www201F 05/26 08:42
推 dog990999: 接頭霸王202F 05/26 08:48
推 hwider: 厲害！203F 05/26 08:54
推 madaoraifu: 太強啦204F 05/26 09:01
推 common7: 推205F 05/26 10:34
推 alec0804: 你他媽這太屌了206F 05/26 11:25
推 cool9203: 有沒有dataset可以open QQ，想拿實驗室2080ti來玩玩看207F 05/26 11:30
兩千張臉crop完的 過一陣子刪連結 主要p網爬的
https://drive.google.com/file/d/1iPlBNOBIee1JZV6S22sBWUzavG2OLZ07/view?usp=drivesdk
我是用gwern pretrain好的anime portrait stylegan2來fine tune
https://mega.nz/file/CRtiDI7S#xo4zm3n7pkq1Lsfmuio1O8QPpUwHrtFTHjNJ8_XxSJs
2080ti 應該幾個小時就有我上面的成果了
個人平常做理論的視覺就隨便看隨便寫
如果大大是專門視覺背景的歡迎來幫忙改善模型
推 fatedate: ...你再幹嘛 浪費才能208F 05/26 12:11
→ tako2000: 好猛209F 05/26 12:38
→ aa779922: 浪費才能210F 05/26 13:08
推 smallkaka: 浪費才能211F 05/26 13:50
→ took: 深度學習作業212F 05/26 14:18
※ 編輯: cybermeow (36.225.161.55 臺灣), 05/26/2020 14:54:09
推 FuckQguy: 全自動接頭www213F 05/26 15:00
推 A1pha: 讓我猜猜，論文寫到起笑了對吧？XD214F 05/26 15:47
推 crazy6341556: 害怕215F 05/26 16:07
推 SilverFlare: 接頭博士www216F 05/26 16:17

--
※ 看板: ACG　文章推薦值: 1 目前人氣: 0 累積人氣: 577　
分享網址: 複製 已複製
(￣︶￣)ｂ hjb 說讚！
r)回覆 e)編輯 d)刪除 M)收藏 ^x)轉錄 同主題: =)首篇 [)上篇 ])下篇