日本技術宅利用深度神經網路與 VR 體驗《沙耶之歌》的世界

愛的戰士虛淵玄在 Fate/Zero 、魔法少女小圓動畫之前，還有《沙耶之歌》以及《鬼哭街》等知名遊戲作品，其中《沙耶之歌》可謂是老虛徹底顛覆玩家三觀的作品，主角眼中的萌妹子沙耶是個怪物，而正常的人類與萬事萬物在主角眼中則是腐爛的肉塊，遊戲中無論哪條 End 都令人致郁，而這樣的顛覆三觀與獵奇致郁的特性讓《沙耶之歌》成為了一代又一代玩家心中的神作，日本的一位技術宅利用深度神經網路技術與 VR 設備，可以讓自己體驗《沙耶之歌》的世界讓自己與男主角郁紀一眼感官出現顛覆。

《沙耶之歌》的遊戲中世界觀設定是顛覆人類正常感觀的，男主角郁紀因為事故感觀發生逆轉，正常的人類是爛肉腐肉自己已經無法在世界上正常生活，而在這種情況下郁紀遇到了綠髮穿著白色連衣裙的美少女沙耶，沙耶成為了郁紀活下去的力量，二人成為情侶同居啪啪啪，而且還一起吃「果凍」，但是在男主角以外的視角，郁紀和一團爛肉觸手同居而且一起吃人類內臟。技術宅 kano sawa 決定利用 VR 設備和自己掌握的相關圖像處理技術，把自己的屋子變成男主角郁紀眼中都是爛肉的世界。

首先是利用 360° 攝像機為自己的卧室拍攝全景照片，之後使用神經網路深度學習框架 Chainer 轉換圖片，之前那個自動為線稿上色的技術也是利用 Chainer 框架，Chainer 將卧室的全景照片轉換成《沙耶之歌》中的爛肉風格並且自動將照片合并起來。之後再利用 Unity 將轉換後的照片製作為可以在 VR 頭盔中展示的 360° 圖像（就是將拍攝好的擴展的全景圖像還原成球體圖像，讓你置身其中）。完成這一切後你就可以體驗《沙耶之歌》的世界觀了，要是這個技術可以再加入突然從眼前蹦出個沙耶來就完美了。

很有創意的一個遊戲

不過只是遊戲而已，再模擬也是遊戲，所以我都是看的劇情，玩就不想去浪費時間了

劇情確實碉，幾大神器真是厲害

本文為頭條號作者發布，不代表今日頭條立場。