深蘭科技|計算機視覺+藝術(shù)處理,現(xiàn)實場景秒變動漫大片
2.2 損失函數(shù)
卡通圖像具有銳利邊緣,順滑的色彩偏差,紋理也相對簡單,所以作者定義了新的loss來完成這個需求。
作者提出了損失函數(shù)L(G,D),由兩部分組成,第一部分為普通的GAN損失,第二部分為保證原真實圖像內(nèi)容的內(nèi)容損失,如公式所示:
可以看到公式②中比普通GAN損失多加了一個,也就多了一個數(shù)據(jù)集。那這個數(shù)據(jù)集怎么來的,它是通過對原始卡通圖像進(jìn)行邊緣模糊后得到的(邊緣模糊圖片見圖2-2,左邊為原圖,右邊位邊緣模糊圖),目的是為了讓生成網(wǎng)絡(luò)G生成邊緣清晰的圖片,所以判別為假數(shù)據(jù)。而公式③中的就是Neural Style(風(fēng)格遷移)里面的內(nèi)容損失,只不過把L2損失改為L1損失,在這里我們可以看成是一個正則化。
圖2-2清晰動漫圖(左)、邊緣模糊圖(右)
2.3 初始化技巧
作者引入一個初始化技巧,用公式③中的損失先來單獨訓(xùn)練G,大概訓(xùn)練10個epoch。這樣做的目的是為了生成的圖片初始后就能保證原真實場景的內(nèi)容,因為普通的單向GAN要是沒有加入一些限制很難穩(wěn)定保證原始圖片的內(nèi)容,大多會出現(xiàn)扭曲或更嚴(yán)重的情況。
3.總結(jié)
經(jīng)過上述的技術(shù)細(xì)節(jié)來訓(xùn)練CartoonGAN,就可以將現(xiàn)實的場景完美的轉(zhuǎn)換成漫畫風(fēng)格。
最后,我們就來欣賞一些漂亮的轉(zhuǎn)換結(jié)果。

請輸入評論內(nèi)容...
請輸入評論/評論長度6~500個字
最新活動更多
-
即日-9.1立即下載>> 【限時下載】ADI中國三十周年感恩回饋助力企業(yè)升級!
-
即日-9.16點擊進(jìn)入 >> 【限時福利】TE 2025國際物聯(lián)網(wǎng)展·深圳站
-
10月23日立即報名>> Works With 開發(fā)者大會深圳站
-
10月24日立即參評>> 【評選】維科杯·OFweek 2025(第十屆)物聯(lián)網(wǎng)行業(yè)年度評選
-
11月27日立即報名>> 【工程師系列】汽車電子技術(shù)在線大會
-
12月18日立即報名>> 【線下會議】OFweek 2025(第十屆)物聯(lián)網(wǎng)產(chǎn)業(yè)大會
推薦專題
- 1 阿里首位程序員,“掃地僧”多隆已離職
- 2 先進(jìn)算力新選擇 | 2025華為算力場景發(fā)布會暨北京xPN伙伴大會成功舉辦
- 3 宇樹機器人撞人事件的深度剖析:六維力傳感器如何成為人機安全的關(guān)鍵屏障
- 4 清華跑出具身智能獨角獸:給機器人安上眼睛和大腦,融資近20億
- 5 特朗普要求英特爾首位華人 CEO 辭職
- 6 踢館大廠和微軟,剖析WPS靈犀的AI實用主義
- 7 騰訊 Q2 財報亮眼:AI 已成第二增長曲線
- 8 谷歌吹響AI沖鋒號,AI還有哪些機會
- 9 蘋果把身家押在Siri上:一場輸不起的自我革命
- 10 共探合作新機遇!江門市新會區(qū)(深圳)“AI + 機器人” 產(chǎn)業(yè)對接會成功舉辦