博客專欄

EEPW首頁 > 博客 > B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

發(fā)布人:傳感器技術(shù) 時間:2022-06-27 來源:工程師 發(fā)布文章

編輯:桃子 拉燕

【導(dǎo)讀】耗時10天,B站up主大谷帶著他的新作又來了!這次,他用AI「畫」了一首音樂MV,配上動感音樂,簡直太魔幻了。

B站up主大谷最近又整了一個新活兒:


用AI「畫」了一首音樂MV。

不如先看個視頻,體驗下這場視覺和聽覺的盛宴。

,時長03:17

怎么樣,是不是整體很動感魔幻?

瑰麗玄妙,宛如夢境

據(jù)大谷介紹,這個視頻自己耗時10天才完工。

這期間,大谷全程負責(zé)「監(jiān)工」,盯著AI干活,并提供給AI需要的攝像機鏡頭位移坐標,補充一點場景文字信息。

到后期再填上字幕和微調(diào)剪輯,就完成了這個作品。

圖片

而他做這個視頻的動機很簡單,

想要研究一下AI的繪畫潛力怎么樣。

那么這個AI作畫的能力究竟如何?我們來個「慢鏡頭」欣賞一下...

「轉(zhuǎn)身那一刻,世界崩落」這句歌詞一出,

開場畫面中,粉色的童話世界瞬間變成了萬丈深淵的魔域世界,讓人有一種很大的視覺反差。


?再來看,AI根據(jù)歌詞「天空如同被雷鳴閃電劃破、玫瑰盛開」填畫的表現(xiàn)力也很不錯。

其中像「閃電」和「玫瑰」這樣的關(guān)鍵信息都在畫面中生成了。

但是,當你仔細盯著這個動畫不要眨眼睛時,是不是真有種自己吃了云南毒蘑菇的感覺。

天旋地轉(zhuǎn),簡直太魔幻了...


?Boom,Boom,Boom,Boom歌詞一出,AI作畫的風(fēng)格就很詭異了...

很明顯歌詞中都在說的是,心跳Boom。

而AI卻把炸彈、煙花、氣球,白色框框雜糅到一個畫面中。


這畫風(fēng),這調(diào)調(diào)和整首歌的意境不太相融了。

可以說,AI的智商在理解句子上沒問題,而理解整首歌詞內(nèi)涵還是不太夠(doge)。

到了最后收尾,AI從前面很有意境的風(fēng)格轉(zhuǎn)化成了賽博朋克風(fēng)。

星際飛船、行星、宇宙...


就比如下面這個場景很類似「黑客帝國」中尼奧從母體誕生周圍環(huán)境的一幕。


可以看到,AI根據(jù)輸入的文字歌詞和場景描述生成了每一幀畫面中的世界。

每一幅畫面亦真亦幻,似夢非夢。

可是,你知道制作這個視頻背后技術(shù)嗎?

大谷表示,「使用了開源AI繪畫項目Disco Diffusion」。

技術(shù)介紹:AI作畫「卷」出新高度

在介紹這個工具之前,先來看兩張圖片。



看完這兩張圖片,你可能會覺得,這是哪個大牛插畫師的作品。估摸著,這么精良的作品,放到市場上賣個幾千不是啥大問題。

如果真是大牛畫的,那還真沒什么亮點了。雖然很好看,但也不是不能完成的。

可如果,這兩幅畫,還有一大堆別的一樣好看的畫,都出自AI之手呢?

你會不會覺得不可思議?

真相是:這兩幅畫的作者都是Liliia Sitailo。準確來講,Sitailo只負責(zé)輸入指令,作畫部分完全交由AI完成。


如果你讓我說,這么完美的構(gòu)圖、清晰的思路,還有身臨其境的氛圍、抓人眼球的色彩,都是AI完成的,我還真不一定信。

事實證明,這款谷歌開發(fā)的名為Disco Diffusion的AI作畫工具非常之成功。目前,這個工具已經(jīng)更新到了第五代,V5版本。

圖片

這是一款由谷歌Colab平臺開發(fā)的,利用人工智能深度學(xué)習(xí)進行數(shù)字藝術(shù)創(chuàng)作的工具,基于MIT許可協(xié)議,目前已開源。

用戶可以在谷歌Drive直接運行。

有了這個工具,不需要用戶懂什么構(gòu)圖知識,也不需要有任何藝術(shù)細胞,只要想點子就可以了。

另外,大家熟知的DALL-E也同樣在4月迎來了更新。

Open AI對畫圖界的扛把子DALL-E進行了2.0版的全面升級。讓自然語言生成圖像達到了全新的高度。

比如下面這幅很有穿越感的畫。


還有之前占據(jù)AI畫畫老大哥地位的Imagen,做了一副「有點怪,我再看看」的畫。


谷歌除了上面提到的Disco Diffusion,最近也有一款名叫Parti的畫畫AI問世了。

Parti,全名叫「Pathways Autoregressive Text-to-Image」,是谷歌大腦老大Jeff Dean提出的多任務(wù)AI大模型藍圖Pathway的一部分。

我們來看看Parti的作品:


看完后,是不是頓時感覺,會畫畫的AI都這么卷了...

大谷是誰?

提到大谷,你一定會立馬想到「AI復(fù)活」系的專業(yè)戶。


大谷1991年生于北京,獲得了紐約視覺藝術(shù)學(xué)院電腦藝術(shù)碩士學(xué)位。

作為一個藝術(shù)家,音樂家,程序員和獨立的游戲設(shè)計師,生產(chǎn)力真是爆炸。

此前,我們已經(jīng)看到過很多由他創(chuàng)作的一些作品。

最出名的就是用AI修復(fù)100年前老北京影像。發(fā)布后,這段修復(fù)Vlog爆火,引來許多網(wǎng)友的關(guān)注。


另外,像他用AI修復(fù)讓李大釗、陳延年等老先輩們露出笑容也得到網(wǎng)友一致好評。


還有AI還原宋明清三朝皇帝、泰戈爾、梅蘭芳,百年前上海時裝秀....


所以說稱其為「AI復(fù)活專業(yè)戶」也不為過。

不過,這次大谷卻為我們帶來了不一樣的創(chuàng)作。

網(wǎng)友:AI吃毒蘑菇了

對于大谷新作,網(wǎng)友有好多話要說。

一位網(wǎng)友肯定了AI作畫能力,

圖片

然而有人反駁道,有審美疲勞的,而且很多隨機離散的結(jié)果「藝術(shù)」其實是無意義的,因為人根本看不懂這個作品。

圖片

有小伙伴看完視頻感覺像是吃了云南蘑菇中毒出現(xiàn)幻覺一樣,還將其稱為「云南AI」

圖片

還有網(wǎng)友給這個畫音樂MV的AI一些建議:


看著害怕,像逃離不了的夢境


講真,看過視頻后的小伙伴們,有沒有一種像是無法逃脫夢境的感覺?

歡迎評論區(qū)討論。

參考資料:

https://www.bilibili.com/video/BV18v4y1M74U?spm_id_from=333.999.0.0http://dgspitzer.my-style.in/gameportfolio/?page_id=2&i=1https://www.bilibili.com/read/cv16525687/https://36kr.com/p/1719274187848967https://cloud.tencent.com/developer/article/2007432


來源:新智元


*博客內(nèi)容為網(wǎng)友個人發(fā)布,僅代表博主個人觀點,如有侵權(quán)請聯(lián)系工作人員刪除。

led顯示器相關(guān)文章:led顯示器原理




關(guān)鍵詞: AI

相關(guān)推薦

技術(shù)專區(qū)

關(guān)閉