Stability AI 把繪畫門檻打?yàn)?0!
編者按
「智能之境」專欄更新:Stability AI 上新了!
其收購的 Clipdrop 發(fā)布了全新的 Stable Doodle 工具,我在使用后最為直觀的感受就是 —— 把繪畫門檻打下來了。
在 Stable Doodle 之前,使用各類 AIGC 繪畫工具最為痛苦的就是要寫非常非常詳細(xì)看著也不像人話的 Prompt,我想這也是很多人的痛點(diǎn),不然也不會有像 ArtHub.ai 等提供 Prompt ideas 網(wǎng)站的誕生。
Prompt ideas
Stable Doodle 帶來的最大的變化就是 Prompt 姿勢的更新:
你隨便畫個草圖,再搭配極為簡單的 Prompt,相對精準(zhǔn)而極為精致的圖就誕生了。
使用 Stable Doodle 非常簡單,只需要打開 https://clipdrop.co/stable-doodle 網(wǎng)頁,無需登錄賬號(多次使用后會提示登錄),直接在草圖上隨手畫,再輔以簡單的 Prompt 就可以。
比如我作為資深鏟屎官想畫貓:
看到 Stable Doodle 生成的圖,我最大的感受就是:我的草圖不配……
本文除了標(biāo)題和「編者按」之外,其他內(nèi)容均使用 AIGC 創(chuàng)作。在向 ChatGPT(GPT-3.5)、GPT-4 和微軟 New Bing 發(fā)出同樣的 Prompt 而得出不同的內(nèi)容之后,我最終采用了 GPT-4 的內(nèi)容,主要是它所生成的內(nèi)容邏輯性和準(zhǔn)確性相較之下都更好一些。一開始 New Bing 生成的看著專業(yè)性極強(qiáng),但細(xì)細(xì)甄別之下我就發(fā)現(xiàn)了錯誤,如下:
接下來,就一起來看 GPT-4 是如何報道 Stable Doodle 的吧,如果你發(fā)現(xiàn)了錯誤,請一定要留言告訴我。
GPT-4:Stable Doodle 的誕生與應(yīng)用
Stability AI 公司近日推出一項新的工具 Stable Doodle,這是一款可以將簡單的繪圖轉(zhuǎn)化為動態(tài)圖像的工具,為各行各業(yè)的專業(yè)人士和愛好者提供了無限的圖像可能性。
Stable Doodle 的發(fā)布與特性
該工具由 Clipdrop 和 Stability AI 公司共同開發(fā),可以顯著提升從教育到創(chuàng)意設(shè)計,再到時尚和藝術(shù)等各種行業(yè)的效率。現(xiàn)在,任何具有基本繪畫技能和在線訪問能力的人都可以在幾秒鐘內(nèi)生成高質(zhì)量的原創(chuàng)圖像。
Stable Doodle 的用戶友好性使設(shè)計師、插圖畫家和其他專業(yè)人士能夠節(jié)省寶貴的時間并最大化效率。他們可以立即將繪制的思維導(dǎo)圖實(shí)施到作品中,為客戶創(chuàng)建設(shè)計,為演示文稿和網(wǎng)站提供素材,甚至創(chuàng)建標(biāo)志。其可能性是無窮的,而且使用起來非常有趣。
例如,以下是一些使用 Stable Doodle 的示例:
提示:舒適的椅子,‘等距’風(fēng)格提示:穿著牛仔夾克的貓,‘?dāng)?shù)字藝術(shù)’風(fēng)格
Stable Doodle 的工作原理
Stable Doodle 結(jié)合了 Stability AI 的 Stable Diffusion XL 高級圖像生成技術(shù)和強(qiáng)大的 T2I-Adapter。T2I-Adapter 是由騰訊 ARC (license) 開發(fā)的一種條件控制方案,它允許對 AI 圖像生成進(jìn)行精確控制。
通過向現(xiàn)有的大型擴(kuò)散模型添加可訓(xùn)練的參數(shù),T2I-Adapter 能夠包含額外的輸入條件,比如素描、分割地圖或關(guān)鍵姿勢。這個框架同時支持多個模型進(jìn)行輸入引導(dǎo),從而提供對生成過程的更強(qiáng)大控制。對于 Stable Doodle 的用例,T2I-Adapter 提供了輔助指導(dǎo),使預(yù)訓(xùn)練的文本到圖像模型 (SDXL) 能夠理解素描的輪廓,并根據(jù)模型定義的提示和輪廓生成圖像。
T2I-Adapter 網(wǎng)絡(luò)由大約 7700 萬個參數(shù)組成。它為預(yù)訓(xùn)練的文本到圖像 (SDXL) 模型提供額外的指導(dǎo),同時保持原始的大型文本到圖像模型不變。
如何獲取和使用 Stable Doodle
Stable Doodle 目前可以在 Clipdrop by Stability AI 的網(wǎng)站和應(yīng)用程序 (iOS 和 Google Play) 上獲得。用戶可以在不登錄的情況下開始試用該工具,但每日有使用限制。該工具的用戶界面設(shè)計直觀易用:用戶只需用鼠標(biāo)創(chuàng)建一個基本的素描,選擇一個藝術(shù)風(fēng)格,然后點(diǎn)擊“生成”即可。
Stable Doodle 甚至允許藝術(shù)定制,通過 Stable Diffusion XL 提供了 14 種可供選擇的風(fēng)格。風(fēng)格范圍從現(xiàn)實(shí)(攝影)到電影,再到創(chuàng)意(奇幻藝術(shù)和折紙)。
Stable Doodle 的價值和限制
盡管 Stable Doodle 展示了令人印象深刻的能力,但還是需要認(rèn)識到其固有的限制。Stable Doodle 使用算法分析圖像的輪廓以生成視覺上令人愉悅且連貫的結(jié)果。最終的輸出取決于用戶提供的初始繪圖和描述,以及工具的準(zhǔn)確性可能會因場景的復(fù)雜性而變化。
用戶在完全依賴 Stable Doodle 進(jìn)行關(guān)鍵應(yīng)用時應(yīng)謹(jǐn)慎行事。與所有 Clipdrop 工具一樣,Stable Doodle 的用戶必須遵守 Clipdrop 的通用條款和條件。
綜上,Stable Doodle 的發(fā)布為各行各業(yè)的專業(yè)人士和愛好者提供了一種全新的創(chuàng)作方式。盡管存在一些限制,但其潛力和可能性仍然無法估量。我們期待看到更多的創(chuàng)新和應(yīng)用案例。
*博客內(nèi)容為網(wǎng)友個人發(fā)布,僅代表博主個人觀點(diǎn),如有侵權(quán)請聯(lián)系工作人員刪除。