AI圓了我的動漫夢小時候,我可喜歡看動漫了,電視劇上播放的動漫,我?guī)缀醵伎催^。 那個年代,陪伴我們度過童年的經(jīng)典動漫太多了,比如《四驅(qū)兄弟》。 那時候,一放學(xué),到家把書包一甩,準(zhǔn)點打開電視,聽著熟悉的音樂“抬頭望望天月亮在笑,低頭看看地,浪花在跳,這個世界我們多么渺小...”,幸福就是如此簡單。 看過那么多精彩動畫片,我就想可不可以創(chuàng)作一個屬于自己的動畫片呢? 可惜我實在是沒有繪畫天賦和文學(xué)天賦。長大后也迫于生計,選擇了計算機這個和動畫片制作完全不相關(guān)的專業(yè)。 我本以為我的動漫夢永遠也無法實現(xiàn)了,然而,AI的爆發(fā),讓我的動漫夢也有了一絲可能! StoryDiffusion,漫畫生成神器傳統(tǒng)的漫畫創(chuàng)作對于我這種理科生來說,門檻是非常高的,其中,繪畫的技術(shù)就是不可逾越的鴻溝。 不過現(xiàn)在好了,這些都不是問題! 今天要介紹的是開源、免費、生成連貫故事的神器--StoryDiffusion 這個工具是南開大學(xué)和字節(jié)跳動聯(lián)合開發(fā)的故事生成軟件,官方提供了huggingface的在線體驗方式,我們也可以本地進行部署。 那么,StoryDiffusion能干什么? 我們一起來看看吧! 漫畫生成作為漫畫生成的工具,在生成多幅圖的時候,保持連貫性是非常重要的。從官方給的Demo來看(下方的圖),StoryDiffusion是可以生成服飾一致、任務(wù)一致、并且劇情連貫的分格漫畫。 這個厲害了,目前,Stable Diffusion、midjourney、Dall-e3雖然也能生成風(fēng)格一致的畫,但是要多次調(diào)整提示詞,很費時間,對于當(dāng)今提倡效率為王的社會,這種低效的方式不是大家所推崇的。 除了這個例子之外,還有其他的例子,下面的這個例子主題是“Girl and Squirrel”,看起來很像是新海誠風(fēng)格的漫畫,總體感覺還不錯。 視頻生成漫畫生成是我比較在意的功能,視頻生成也是我關(guān)注的功能。 今年的AI發(fā)展太快了,視頻生成能力今年已經(jīng)又不少產(chǎn)品了,比如pika、runway gen-2,以及還沒有面世的sora. StoryDiffusion通過圖像語義運動預(yù)測器和用戶輸入圖像作為條件來生成高質(zhì)量的視頻。 官方給出了不少Demo視頻,太多了, 我就挑了幾個,讓大家點評點評。 看起來是不是很酷?如果配上BGM、配音,不比大片的效果差! StoryDiffusion如何用呢?吹了那么久了,那么這個工具要在哪里用呢?要不要花錢? 傳送門如下:https:///spaces/YupengZhou/StoryDiffusion StoryDiffusion提供了huggingface的體驗地址,我們可以完全免費使用。當(dāng)然,也是可以下載到本地進行部署的. 好了,本次分享先到這里。下一篇,將會詳細講講,StoryDiffusion如何使用?能不能用到我們的生產(chǎn)工作流中? 下一期,即將揭曉。 |
|