鬍子

溫暖的石頭,醫生,街舞/劇場愛好者,著迷於科技藝術。 frankhu.tez https://liker.land/f55665566/civic

#2- 快去嘗試! 這真的太神奇了(CLIP = Contrastive Language-Image Pre-training)

發布於
修訂於
1. 連上 http://pixray.gob.io/genesis/ 2.打關鍵字 (3. 調整參數) 4. 完成!

AI 領域進程真的日新月異,好一陣子沒有追蹤/更新就被如今的發展嚇了一 ~ 大 ~ 跳;今天看到台灣藝術創作者王新仁(阿亂,Aluan) 在臉書釋出兩個很有趣的NFT作品:Interstellar (pixray_genesis)2001 A Space Odyssey (pixray_genesis) 。好奇之下,一路查下去發現不可思議,簡而言之:Pixray 這個網站 藉由AI 抓取你輸入的關鍵字 經過 些微參數修改 後製作出來的作品。 沒錯,由 AI 幫你「製造」出你文字所傳達的可能圖像。
(經過小小閱讀文獻發現,可能使用「製造」這個詞可能更可以表達 CLIP 的強大之處,若有誤請不吝於指正,自己對於 AI的知識真的不太連貫而片面。)

太多第一次接觸到的關鍵字讓你有點頭昏,沒有關係,重點是直接試玩看看!

網址: https://pixray.gob.io/genesis/

操作:

  1. 連上 https://pixray.gob.io/genesis/
  2. 打關鍵字
    任何,單詞/形容詞+主詞/甚至形容一個情境的句子都可以 
    測試起來發現 電影/ 名人 目前最常使用,
    不過我發現輸入 畫家/繪畫 本來都是圖像的資訊拼湊出來的通常較為賞心悅目
    可以用" | "來分隔, 例如: " Love | Art"
  3. 調整參數. :此步驟可省略
    目前看上面作品及加入作者發布的Discord還沒有找到完整的調整參數語法集合,不過自己蒐集了一些或許可以嘗試看看
    - aspect: portrait 呈現出圖畫像的感覺
    - quality: better 調整畫質
    - color_mapper: lookup 視角

  4. 按下 Submit 開始等待 - - - - - - 完成!

  5. 舉例 以下三個都沒有調整參數

這是我搜尋兩位畫家 克林姆 Gustav Klimt 配上 席勒 Egon Schiele 產生的影像

from the given title 'Gustav Klimt | Egon Schiele' on the pixray genesis tool



這是我搜尋 Brain Computed Tomography scan 腦部電腦斷層 產生後的影像

from the given title 'Brain Computed Tomography scan' on the pixray genesis tool


這是我搜尋 手術房 surgery room + 黑色電影 film noir 後產生的影像

from the given title 'surgery room | film noir' on the pixray genesis tool




這是一個由紐西蘭籍AI藝術家 dribnet 利用OpenAI 團隊改良DALL·E 模型而發展出另一種文本轉譯圖像領域的機器學習方法 CLIP(Contrastive Language-Image Pre-training) ,而打造出的實驗網站。 可以瀏覽目前 Objkt上從Pixray製作出來的NFT項目們 ,有的人使用 Leonardo Dicaprio + Pikachu 製成Leonardo DicaPikachu (pixray_genesis) ,作者dribnet 自己的作品也很美,如他使用 Oil slick 經過調整產生出來的圖


作者還很貼心的串接到Tezos鏈, 如果喜歡且想加以使用可以支付1 xtz 給dribnet 並直接將作品鑄造(Mint)成一個非同質化代幣(NFT) 發佈到 Objkt (一個基於Tezos鏈上的NFT (一)/二級拍賣所) 上且100%歸於創作的人所有!

作品官方介紹
An experiment in minting directly from a neural net drawing tool.Just give the system a title for your work, and it will draw it for you!
It can be used with tezos currency and hic et nunc.
Made something you like? Generate a mintable version to claim it as yours.
Mint once or multiple times with any tezos connected wallet.
All pieces you mint are yours to keep or swap.
There is currently a modest mint charge of 1 ꜩ to support this online platform.
I collect no royalaties. However you as creator get 10% on resales.
Have fun and good luck. 🤗




大家把握最熱騰騰的時間嘗試看看,把自己的領域/喜歡的電影/畫家/攝影師,或是腦袋中任何天馬行空的想法/句子丟在關鍵字欄位試試看,常常會有意想不到的效果;希望也能在留言處與我分享你做出的圖還有打了什麼關鍵字!太有趣了~


很認同阿亂在臉書討論的:

NFT到底影響了些什麼?我們很可能多年後才會知道。
但我確切肯定的是,他把整個演算藝術、新媒體藝術以指數型態推進,快到我燃燒生命的去追,都只能捕捉到影子。
NFT 人類科技、藝術加速器可不是蓋的,藝術史要徹底改寫了。

進入NFT世界令我著迷的,不是追也追不完/光鮮亮麗/酷炫新潮的各種PFP專案,而是包括能有機會見證早期創作者發跡到爆紅的過程(例如最近的 Rainy330),或是各種帶有很強實驗性質的互動作品(Verses / Distributed Consciousnessfx(hash) Pixray)。以往後也會參考馬特上已分享過的NFT及 Tezos 相關文章,看看有什麼自己想補充或是多描述的地方。



參考資料:

  1. 官方Discord群推薦的兩篇介紹Pixray的文章
    a. Janelle Shane < Playing with Pixels >  at AI Weirdness
    b. Janelle Shane < Bonus: What's down that hole? > at AI Weirdness
  2. 神人們Open AI團隊介紹 CLIP 官方文件 
  3. 知乎好文 
    如何评价OpenAI最新的工作CLIP:连接文本和图像,zero shot效果堪比ResNet50?


喜歡我的文章嗎?
別忘了給點支持與讚賞,讓我知道創作的路上有你陪伴。

CC BY-NC-ND 2.0 版權聲明

深度学习算法真的能理解人类语言吗?自然语言生成程序OpenAI GPT-2的上手体验

透过GPT-3一窥未来,我脑袋爆炸了——全能AI GPT-3的应用与讨论

NFT 故事集:消失的此時此刻,是封聖還是叛徒?

11

看不過癮?

一鍵登入,即可加入全球最優質中文創作社區