是世界瘋了還是自己瘋了，日本技術宅利用深度神經網路與 VR 體驗《沙耶之歌》的世界
愛的戰士虛淵玄在 Fate/Zero 、魔法少女小圓動畫之前，還有《沙耶之歌》以及《鬼哭街》等知名遊戲作品，其中《沙耶之歌》可謂是老虛徹底顛覆玩家三觀的作品，主角眼中的萌妹子沙耶是個怪物，而正常的人類與萬事萬物在主角眼中則是腐爛的肉塊，遊戲中無論哪條 End 都令人致郁，而這樣的顛覆三觀與獵奇致郁的特性讓《沙耶之歌》成為了一代又一代玩家心中的神作，日本的一位技術宅利用深度神經網路技術與 VR 設備，可以讓自己體驗《沙耶之歌》的世界讓自己與男主角郁紀一眼感官出現顛覆。
《沙耶之歌》的遊戲中世界觀設定是顛覆人類正常感觀的，男主角郁紀因為事故感觀發生逆轉，正常的人類是爛肉腐肉自己已經無法在世界上正常生活，而在這種情況下郁紀遇到了綠髮穿著白色連衣裙的美少女沙耶，沙耶成為了郁紀活下去的力量，二人成為情侶同居啪啪啪，而且還一起吃「果凍」，但是在男主角以外的視角，郁紀和一團爛肉觸手同居而且一起吃人類內臟。技術宅 kano sawa 決定利用 VR 設備和自己掌握的相關圖像處理技術，把自己的屋子變成男主角郁紀眼中都是爛肉的世界。
首先是利用 360° 攝像機為自己的卧室拍攝全景照片，之後使用神經網路深度學習框架 Chainer 轉換圖片，之前那個自動為線稿上色的技術也是利用 Chainer 框架，Chainer 將卧室的全景照片轉換成《沙耶之歌》中的爛肉風格並且自動將照片合并起來。之後再利用 Unity 將轉換後的照片製作為可以在 VR 頭盔中展示的 360° 圖像（就是將拍攝好的擴展的全景圖像還原成球體圖像，讓你置身其中）。完成這一切後你就可以體驗《沙耶之歌》的世界觀了，要是這個技術可以再加入突然從眼前蹦出個沙耶來就完美了。
開發過程
Chianer-gogh github 地址
※走向事業巔峰，徳井青空、岸田梅爾成為 NHK 節目長期出演者 Enako 登上漫畫雜誌封面
※1.5 部各編劇隨心所欲創作，竹箒日記更新奈須蘑菇談 FGO 情人節活動與 1.5 部
※CG 高清重製近景特寫使用 2D，《無畏魔女》動畫 OP 光碟版與 TV 版對比
※真正的 JK 是稀有資源，日本警視廳擬規制 JK 營業禁止 18 歲以下未成年人從事相關業務
※能打能吵但永遠是一家人，萬人票選最理想的親子角色
TAG:acgdoge |
※日本技術宅利用深度神經網路與 VR 體驗《沙耶之歌》的世界
※全世界的女神都被它得罪了….這款刷爆國外朋友圈的軟體，要用神經網路來整頓修圖界
※神經蕾絲技術取得進展，世界將分裂成神的世界和人的世界？
※世界上最孤立的國家，牽動著全世界的神經
※深度神經網路中的對抗樣本與學習
※深度學習大神：我見證過一個偉大的賭局，當時神經網路並不被看好
※使用 C＃的深度神經網路 IO
※神經網路技術在網路視頻處理的應用探討
※神經網路之父：深度學習已進入瓶頸期，模擬人類神經結構將是突破口？
※進軍音樂界，谷歌利用神經網路創造人類從未聽過的聲音
※看了這篇文章，了解深度卷積神經網路在目標檢測中的進展
※哈佛大學提出在雲、邊緣與終端設備上的分散式深度神經網路DDNN
※我終於能看懂這部世界上最神經質的電視劇了！
※深度學習之父的神經網路第三課！
※深度學習之父的神經網路第五課！
※深度神經網路是否模擬了人類大腦皮層結構？
※LSTM、GRU與神經圖靈機：詳解深度學習最熱門的循環神經網路
※使用神經網路技術生成的照片真的讓我震驚了
※馬里蘭大學論文：訓練深度神經網路中的一致性難題