日刊 画像生成AI (2022年9月5日)
画像生成AI界は、今認識できないスピードで進化をし続けています。
DALL・E2公開、Midjourney公開、StableDiffusionがオープンソースで公開されて..進化の速度が上がり続けており、日々異常なスピードで変化しています。

そんな中、毎日時間なくて全然情報追えない..!って人のために業界変化、新表現、思考、問題、技術を毎日あらゆるメディアを調べ、まとめています。
昨日までの投稿はこちら
(いいねくれるとやる気がでます。どんどん見てくれる人増えて嬉しい。)
開発
Image variations (Stable Diffusion)
画像をインプットしたら、そのバリエーションを生成するプログラムです。プログラム自体は23日くらいに書いた人がいたっぽいですが、多くの人が使える形でリリースされました。

こちらで使えます。GraidoでUIがあるので嬉しい。

深津さんのツイート見てたらこれは、バリエーション生成ようにファインチューンしてるみたいですね。なるほど..
潜在空間をゴニョゴニョ計算するのかと思ったら、バリエーション生成用のファインチューンしてるんですよね… なんで別モデルが必要なのか、まだ理解しきれておらず。
— 深津 貴之 / THE GUILD / note.com (@fladdict) September 5, 2022
NekoDraw (クリスタ用Stable Diffusionプラグイン)
夏猫さんが開発されたイラスト制作ソフト「クリスタ」のStable Diffusionプラグイン
クリスタで Stable Diffusion ! text2img 編! pic.twitter.com/r86W8rfSc3
— 夏猫💕 (@6jz) September 3, 2022
深津さんついに開発してたStable Diffusion(Colab)実装。
webUIなかなか使いづらく、生成重くて時間かかっていたので現状最強と思われるのcolab、Deforum Stable Diffusion(昨日3.0公開)を使ってましたが、深津さんが昨日メモリ削減のコードを書かれていて、それが入っていることを考えるとかなりこちらいいかもしれないです。楽しみ!
Deforumとの違いは、タイルと、Promptの重み付けがあること、さらにGUIであることですね。これは世界の中で出ている中でもかなり強いのでは!
特徴
・GUI
・タイルループモード(コード:https://gitlab.com/-/snippets/2395088)
・Midjourney的Prompt重みづけ(解説:https://zenn.dev/td2sk/articles/eb772103a3a8ff)
・プロンプトA→Bへのブレンド生成
CINEMA4D + Stable Diffusion
リアルタイムレンダリングエンジンとしてStableDiffusionを利用している事例。Cinema4DのシーンをそのままStable Diffusionに送り、promptでレンダリングするみたいです。面白い..これをレンダリングと捉えるのなんかいいな。

Progrock Stable Diffusion
この方はprogrock-stableを使用したものです。8000個週末に生成されたそうです。これがPrompt、「_age_ _adjective_ _job_ _bodyType_ _genre_ from _country_, _adjective_ lighting」。この「_」の間に単語を配置すると、その単語が同じ名前のtxtファイルからランダムで選択されたものに置き換わるそうです。自分も考えてたけど実装早い。ぜひDeforumに導入してほしい。

Randomized prompts from lists with progrock-stable is my new best thing.
— Benoit Martinez (@_BenoitMartinez) September 4, 2022
"_age_ _adjective_ _job_ _bodyType_ _genre_ from _country_, _adjective_ lighting"
I generated 8000(!) of those this week-end and I have so many ideas to keep on going#stablediffusion #generativeart #aiart pic.twitter.com/o4DVQIC8Ne
Progrock Stable Diffusionはこちら。
memeplex、プチ進化
shi3zさんの無料画像生成AIサービス、memeplexが日々アップデートを繰り返していますね。
memeplexのプロンプト欄が広くなった!
— forasteran (@forasteran) September 5, 2022
→固定SEED欄も横から下に移動
そして「翻訳不要」チェックもついた
(直で英語入れるんなら、いちいち言語判定&翻訳のプロセスがないぶん、負荷も低くなるしね)
ちょいちょい進化していってるwhttps://t.co/ZQWeHFMmZt pic.twitter.com/QeGVh1rkbs
表現
昔の絵画→写真へ
モネの絵画を写真にStable Diffusionで変えた方がTwitterでもRedditでも伸びてます。これは面白いですね。

子供たちの作ったレゴ→写真へ
子供の作ったレゴをStable Diffusionで写真化する事例。これは子供喜びそうだなぁ。知育アプリとしてもかなり有効ですよね。数ヶ月後溢れるほど出てそう。


an app where kids can view their lego models as if they were real and full scale
— Matt Henderson (@matthen2) September 3, 2022
I made these with Stable Diffusion - pushing the photo away from 'lego' and towards 'photograph' pic.twitter.com/v6nVPvyNw2
ドット→写真へ
SatbleDiffusionで昔のPixelアートをリアル化している事例は度々見かけますがかなり伸びていますね。Redditではかなり伸びています。



ローポリキャラ化
img2imgで写真を入れて逆にローポリ化する事例も伸びていますね。あらゆるフィルターがStableDiffusionでよくなっていく。リアルタイムでできるようになるのはまだ先ですが、早くそうなってほしいですね。
#stablediffusion のimg2imgで我が家の猫さまをローポリキャラ化する遊び
— mame-co (@mm_mame_co) September 4, 2022
①1:1猫さま写真を用意して被写体抽出&背景塗りつぶし
②猫さまをぼかす(Photoshopならガウス20~30
③Low polygon render of 猫種もしくはcat, yellow eye color(目の色)で指示
④いい感じのが出来るまでガチャる
⑤かわいい pic.twitter.com/6UzBpcEgT2
美しかったのでメモ
画像拡大していただいたら分かるのですが、AIアートならではのこの未知の質感たまらない..。
much love to @UnknownCo123 for picking up ElectricVibes #10 💚https://t.co/qAu7WGdCoW pic.twitter.com/y5hqYskbjf
— 𝐑𝐢𝐤𝐤𝐚𝐫.tez.eth | #omencollective (@socalpathy) September 5, 2022
ダリの空間を歩く
動画をフレームごとにimg2imgして動画を作ることができて、それでかなり多くの表現が毎日生まれているのですがその中でピック。リアルタイムでこういう世界が見れる世界が楽しみです。
Did I mention this shit just gets more and more fun? 😂 pic.twitter.com/RNMbMtftp8
— Peter Peterson (@itspoidaman) September 4, 2022
深度マップを作って、マウスで動かす
Someone made a depth map for one of my favorite pieces from "The Relativity of Perception" Love it!#ai #aiart #aiartcommunity #discodiffusion pic.twitter.com/Op6RdXhgsL
— Ethan Smith (@Ethan_smith_20) September 4, 2022
Tarteさん作品続々
Tarteさんも続々AI風景を生成し続けられています。雲やライティングのダイナミックさがとても素敵です。
夜明けの国 pic.twitter.com/0Srg1Iz5UM
— tarte (@HoDaRaKe) September 4, 2022
研究
修飾語がどれくらい影響を与えるか分析
それぞれのプロンプトがどういう結果を出すか、明確に言語化されています。これは嬉しい。

Stable Diffusionファインチューニング、成功者登場
海外だとポケモンでかなり高い質で成功している人がいましたが、日本ではまだあまりいませんでしたが、ふるるーさんがやり遂げました。凄すぎ!
リプ欄に諸々詳細が記載されています。ぜひ。
Stable Diffusionでミャクミャク様のファインチューニングを色々試してるんだけどついにいい感じのがでてきた (33000 steps)#AIが描くミャクミャク様 #stablediffusion #ミャクミャク様 pic.twitter.com/3OesAysA7T
— ふるるー (@fururu3d) September 4, 2022
顔生成
コーヒーベクトルさんが目の虹彩(色のついている部分)の検証をされているっぽい。いや顔ここまでいけるのか。すごい。かなりすごい。

Spots—1/2 #stablediffusion #aiphotography #aimodel #promptigraphy #aiart #aiartist #aiartcommunity #aiartists #machinelearning #deeplearning #ai pic.twitter.com/cQrOIwzr11
— CoffeeVectors (@CoffeeVectors) September 5, 2022
思想・ムーブメント
#AIArt は一時的なものだ。
この方の考え方面白かったので紹介。数日、数週間、数ヶ月でStable Diffusionはあらゆるツールに組み込まれる。そうなった時、アーティストは #AIArtというタグを今つけているがつけるだろうか?という話。アーティストは今別に使用済みのブラシをタグ付けしてないですとのこと。
確かにーと思いつつどうなんだろう。今後、まだまだアップデートがあるから、AIアート見たい人はいるだろうし..これは面白いけどなさそうです。もう少し先の話だと思う。
AIArt is the best word imo.
— Thibaud 🏴☠️ (@thibaudz) September 5, 2022
But this word is just temporary, in few days, weeks or months, AI will be in every software (photoshop, procreate, and other 3D ones), so AIArt will be under the digitalart umbrella or under Art one.
Artists doesn’t tag their art with the used brush.
アートの意味とは
イラストコンテストで優勝したAIアートの件に紐づけて、デュシャンの話をされている方がいたのでピック。デュシャンの便器は、美術界が重視する美学や実効は問題ではなく、重要なのはアイデアであると話したという有名な話を語られています。
確かにそうですよね..AIアートがもうイメージプロンプトや、プロンプト指定でいいってなると、もう割とアイデアがかなり重要な世界になりますよね。それか2Dが終了したから3Dの方が価値が上がる?(3DもStabilty.ai出すけど)

I want to talk about that AI art that won at the state fair.
— Erin Reed (@ErinInTheMorn) September 4, 2022
This is not the first time the meaning of art has been questioned and whether somebody could call themselves an artist has taken the art world by storm.
Let me tell you about Marcel Duchamp and readymades. pic.twitter.com/20m6lHMRq3
最後に
今日も議論や、研究、開発が進んでいますね。今日はとりあえず早くImage variationsと、深津さんのcolab触りたい。あと、AWSでいいGPU借りてゴリゴリ動かしたい..。あと、progrockもやりたい。
Twitterに、毎日製作したアートや、最新情報、検証を載せているのでよかったらフォローしてね
https://twitter.com/Yamkaz
次の号はこちら
いいなと思ったら応援しよう!
サポートいただけると喜びます。本を読むのが好きなので、いただいたものはそこに使わせていただきます