日刊 画像生成AI （2022年9月19日）
画像生成AI界は、今認識できないスピードで進化をし続けています。
DALL・E2公開、Midjourney公開、StableDiffusionがオープンソースで公開されて..進化の速度が上がり続けており、日々異常なスピードで変化しています。
そんな中、毎日時間なくて全然情報追えない..！って人のために業界変化、新表現、思考、問題、技術を毎日あらゆるメディアを調べ、まとめています。
昨日までの投稿はこちら
開発
Lexica.artがアップデート。画像検索できるように。
画像検索できるように進化しました。（スマホならカメラ起動してそれで検索もできる）。どんどんGoogleっぽくなっていきますね。Stabilty.aiのCEO Emadさんの言うジェネレイティブサーチエンジンを作ろうとしてそう。
Just added reverse image search to Lexica. You can upload a photo and it’ll return the most similar Stable Diffusion images and their prompts.
— Sharif Shameem (@sharifshameem) September 19, 2022
This makes it very to turn a real world concept into a Stable Diffusion prompt.https://t.co/0YdmzHqYNy pic.twitter.com/8t0UlfqG7W
Auto SD Workflow
このツールこれまで紹介してきた中で、人によってはダントツでいいですね。設定さえすればどんどん生成されていき。以下のPatronから課金すれば手に入るそうです。以下リンクから。
最初はざっとこのように画像をポンポンと生成し、気に入ったのをsaveして、それをstepsの値違い、scaleの値違いをポンポン出していき、お気に入りを探していくというもの。
最後にこれだ！って決めたら、img2imgでバリエーションを出したり、インプットした画像のバリエーションもたくさん生成したり、また最後にstepsの値違いをいっぱい出したりなど、色々できる。本当に何か最高の一枚を求めている人にはぴったりのツールですね。
Stable Diffusionのプロンプトをオートコンプリート/生成する AI
"Magic Prompt"と呼ばれるものが開発されました。これはAI の画像処理用のプロンプト テキストを生成することを目的としたGPT-2モデル。少しプロンプトを入力したらその先を補完してくれるようです。
DALL・E版もありました。
Optimized Stable Diffusion (neonsecret) v1.0.5
Stable Diffusionの改良版で有名なものの一つ、Optimized Stable Diffusionがアップデートされていたようです。（18日公開だった。）さらに超高速になり、さらに高解像度になり、k_diffusionサンプラー、CodeFormerと他upscalerも搭載されているとのこと。リンクは以下に。
使ってみました。txt2imgからimg2img, inpainting, interpolate(補間), upscaleまで搭載されており、機能が豊富です。
8 GB のvram で 2048x2048、24 GB で 3200x3200までいけるとのこと。風景画像とかなら、超高解像度でも違和感ないのを見たことがあるので、そういうの作ってみたいです。
Stable Diffusion for Krita
以前あったKritaでStable Diffusionを使うプラグインはこの方は使いにくかったそうです。この方の目的は、非常にユーザーフレンドリーでデザイナー向けのものを作ることだそう。現在Linuxで動作しますが、今後windowsも対応するとのことです。以下相違点と悪い点。
私のプラグインにおける主な相違点
・ノンブロッキング。画像を生成し、新しい世代が表示されるのを待つ間、作業を継続することができます。
・オプションのNSFWフィルターにより、ストリーミング中でも安全に使用可能
・ウォーターマークをオフにする機能
・モデルの入手先、使用するドライバなどのインストール手順
・ウェブサーバーなし - 既存のプラグインはStable Diffusion webuiのフォークであり、ウェブサーバーを使用します。
・クリーンで文書化されたコード
悪い点
・RabbitMQが必要 - この依存関係を取り除くために、積極的に取り組んでいます。その進捗はstablediffusiondのレポで見ることができます。
・デーモンに依存している - これはRabbitMQの要件と関連しており、この問題と同時に解決しています。
・Ubuntuでのみテスト済み - Windowsでのテストは近日中に行う予定です。
表現
Midjourneyでハイクオリティな映像作品を制作する
Midjourneyならではの特徴を利用し、質の高いアニメーションを作られている例。以前雷でやられていて話題になった方ですね。
#Midjourney で「生きている魔導書」のアニメーションを作るチュートリアルです。version3で作った絵はだいたいこれで「動いている風」に見えますが、test, betaモードでは上手くいかないのが難点です。
— 庭月野議啓 NIWATSUKINO Norihiro (@Dir_NIWATCH) September 19, 2022
Creating a Living Grimoire Animation with Midjourney
[YouTube] https://t.co/Am8RMoCsLm pic.twitter.com/oDCgqjkr6f
img2img Photobashのワークフロー
あぶぶさんのimg2imgとPhotobashを使ったワークフロー。クオリティが高いのでとても参考になります。
研究
画面解像度の検証
海行プログラムさんの検証。（以降続きます）
SDは512x512で学習されているので巨大すぎる画像はあまり有効ではないことがわかるいい事例。
Stable Diffusionの追加トレーニングについて
追加学習させたい人は必見。それに関わる情報がたっぷり詰まっています。
各モデル女の子生成事例まとめ
Waifu Diffusion, Trin Art, Stable Diffusionでの女の子のキャラクターの生成の素敵な事例がまとまっています。
Textual Inversionで学習させた概念を綺麗に生成するためのプロンプトエンジニアリング
思想・ムーブメント
AIで作られたアートアークの本がKICKSTARTER達成
https://www.kickstarter.com/projects/thibaudz/pirate/?ref=bio
次のEコマースの動画 （服版）
What if we imagined what shopping could be like with the technology we already have today?
— Sergey Galkin (@sergeyglkn) September 19, 2022
• Images generated by #AI from text
• #AR clothes fitting
• Voice assistant
In seconds we automatically create a customized product for the customer. What do you think? pic.twitter.com/Evv1uV8yZD
Midjourneyのアートを飾る。
投稿者の奥さんが部屋を装飾するためにMidjourneyで生成したものを飾られているそうです。Redditで伸びていたのでメモ。
『創造がゼロになる時』
"This sounds simple, but it will change the world so pay attention: The most significant consequence of the internet was that it pushed distribution costs to zero. The most significant consequence of AI is that it will push creation costs to zero" https://t.co/ajKxfmwrW6
— Cristóbal Valenzuela (@c_valenzuelab) September 18, 2022
ニューラルネットワークは、アナロジーで「考える」ことができるのか？
最後に
Twitterに、毎日製作したものや、最新情報、検証を載せたりしています。よかったらフォローしてくれるとうれしいです。
実験、最新情報まとめはこちら
https://twitter.com/i/events/1560957489730179077
前回の号はこちら
次の号はこちら
いいなと思ったら応援しよう！
サポートいただけると喜びます。本を読むのが好きなので、いただいたものはそこに使わせていただきます