MarkdownとBullet Journal

いわゆるプログラマーのつぶやき

colabで使えるStable DIffusion web UIの色々

Stable DIffusion web UIの実行環境や種類 Stable DIffusion web UIの実行環境はWindows、Linux、Mac(一部のみ)、Google colab、Paperspaceと色々ある。 web UIアプリケーション用PythonライブラリもGradio、Streamlit等ある Stable DIffusion web UIの種…

StabilityAI公開の新VAE(改良オートエンコーダー)

VAE(改良オートエンコーダー) Stable Diffsion1.5、そのimpainitingVAE版の公開に続いて、StabilityAIからモデルのオートエンコーダ部を置換するVAE(改良オートエンコーダー)が公開された。 huggingface.co 公開されたのはモデルに含まれるオリジナルのk…

AI画像生成のトレンド

AI画像生成の流行 ツイッターでAI画像サービスのトレンド分析記事があり、面白かったので転載。 ※2022.10.17調べ 日本の場合 最初にMidJourneyがブームになり、次にStable Diffusion、現在はNovelAIDiffusionがダントツ。MidJourneyはほとんど使われなくなっ…

Photoshop Generative AI への期待など

AdobeがAI生成対応を発表 AdobeがPhotoshopでinpainting、outpaintingを自由に行えるデモ動画を発表した。 https://blog.adobe.com/en/publish/2022/10/18/media_1f3f6d79aa6f17ef5b8d870e3fc6cf4819fadcf3d.mp4 サイトはこちら blog.adobe.com デモ動画を見…

Stable Diffusion 1.5 inpainting版を試す

inpainting用StableDiffusion 1.5 モデル 先日突然Stable Diffusion1.5を公開したRunwayMLが、続いてStable Diffusion1.5のinpainting用モデルを公開した。 github.com モデルの違いの説明 現在、次のチェックポイントを提供している。 sd-v1-1.ckpt: laion2…

Imagic 特定の写真や絵を変化させる

Imagic解説の写真 Imagicとは 10月17日に発表された。加工したい画像を1枚用意して、それに対してプロンプトを与えると、元の画像の一貫性を保ったままプロンプトで指定した画像加工が行える技術。これまでPhotoshopで行ってきた様な各種の画像加工が行える…

NovelAI/Waifuのネガティブプロンプト/プロンプト活用情報

WaifuDiffusionでネガティブプロンプトを使用 二次元作例のレベルが上がってきた 二次元作成にかける情熱は熱く、ネガティブプロンプト活用などによる優れた作例情報が入手できるサイト情報をまとめた。 使えるネガティブプロンプト ネガティブプロンプトの…

【AUTOMATIC1111対応】Stable Diffusion 1.5 公開

Stable Diffusion 1.5をAUTOMATIC1111(colab)で使用 Stable Diffusion 1.5 DreamStudio、Photoshop向けのアドインツールでは利用可能だったStable Diffusion 1.5のモデルなどが公開された(一部の仲間によるリークらしいが)。下記サイトにアクセスして承認を…

元素法典 NovelAIDIffusion

元素法典Ver.1「氷の魔術」 画質を高めるプロンプト集 NovelAIDiffusionの絵のクオリティを上げる「元素法典」が話題になっており、試してみた。その後も続々と新バージョンが出ている。 元素法典Ver.1 docs.qq.com 元素法典Ver.1.5 docs.qq.com 元素法典Ver…

ハロー、アスカ!

漏洩モデルが一人歩き NovelAIDiffusionはインフラを一新して高速(3〜4秒程度)で画像生成する様になり、無制限生成出来るOpusでサービスを契約していると実に快適である。 しかしながら漏洩したモデルが一人歩きを始め、元素法典というプロンプトを徹底的…

スマホでAUTOMATIC1111 & Google colabを使う

スマホでAUTOMATIC1111を使う スマホでお絵描きができるようになると、自然にスマホでAUTOMATIC1111が使いたくなり試してみたところ、あっけなく使えた。 いつも通りのGoogle colabの手順をスマホで実行すればOK。 利用方法 前提としてPC上で既にGoogle cola…

スマホ+ペンで漫画作り【クリスタ&NovelAIDiffusion】

スマホだけでも漫画は作れるけど・・・ スマホで漫画を作る武器を追加 スマホだけでも漫画は作れるが、細かな作業などはやはりペンがある方が望ましい。iPadなどは専用ペンがあるがiPhoneでも使えるペンを探してみた。 選ぶポイント 軽いこと 使いやすいこと…

【Google colabでStable Diffusion web UI】Ver1.4の利用方法

2022.11.26追記 この記事の内容は古いため、よりシンプルでエラーも出ないcolabノートに対応した下の記事を推奨 programmingforever.hatenablog.com img2imgを強化 数日前にStable Diffusion web UIの1.4バージョンが登場した。色々と機能UPしている。以下の…

スマホで漫画を作る 【クリスタ&NovelAIDiffusion】

スマホで漫画を作る スマホでAI支援の漫画を作る 今日電車で移動する用事があったので試しにやってみたら簡単に漫画が作れた。クリスタ(CLIP STUDIO PAINT)はお試し用として一日1時間無料で使えるサービスがありそれを使ったもので、AI画像生成と連動した…

CLIP STUDIO PAINT & NovelAIDiffusion 漫画のキャラ固定に挑戦

キャラ固定にトライ 注意:この記事は漫画を書いたことがない素人がAIの力を借りて漫画にトライする実証がメインで絵的なセンスは無いのでご注意 今までNovelAIDiffusionを使ってきて、生成されるキャラを固定する方法が自分なりにわかってきた。 人物の詳細…

【CLIP STUDIO PAINT】NovelAIDiffusionとクリスタの連携

仕上げ はじめに 漫画作りにNovelAIDiffusionとクリスタを使った記事。 注意:この記事は漫画を書いたことがない素人がAIの力を借りて漫画にトライする実証がメインで絵的なセンスは無いのでご注意 CLIP STUDIO PAINTとは プロやアマチュアがイラストや漫画…

NovelAiDiffusionを使って漫画に初挑戦

素人が漫画を描いてみようと思った動機 ツィッター等で作例やノウハウなどをどんどん開示されている852話さん(イラストレーター)。その852話さんのツィッターに刺激されて漫画を描いてみようと思い立った。ツールなどに慣れている方は852話さんのサイトや…

【NovelAI Diffusion】パラメータ変化が絵に与える影響:step, scale, etc

NovelAIDiffusionの編集画面 NovelAIDiffusionの画面右側には画像調整に使える色々なパラメータが揃っている。そこで各パラメーターを調整することで絵がどの様に変化するか実証してみた。 実証①:Add Quality Tags 本日サービスがアップデートされ、リッチ…

【NovelAI Diffusion】キャラの固定に使えるシード

キャラの固定 一貫性のあるキャラクタを出そうとした場合は、例えば初音ミクなどの有名なキャラクタを指定すれば作成されるキャラが安定する。 初音ミクを指定して生成した例 これに対して自分好みのキャラに固定して、色々と絵を生成しようとした場合、以下…

【NovelAI Diffusion】絵や人形を使った画像生成のやり方

人形を使ってポーズ指定 絵や人形を使った画像生成 NovelAIDiffusionは、生成される絵に対して絵や写真で指示を与える「img2img」(image to imageの略語)の機能も搭載している。img2imgに絵を与える主な方法は3つある。 ①既存の絵を与える ②手書きで絵を…

【文句なし】NovelAIDiffusionにハマる

NovelAI:A young woman standing on the beach under a beautiful blue sky 圧倒的な画力:txt2img 顔も手足も指も服装も背景も崩れない。夢見た世界があっと言う間にやってきて戸惑うばかりだ。初音ミクのようなキャラクタも確実に認識する。 初音ミク 顔…

【最新】Waifu Diffusion 1.3を試す

2022.10.7追記 10.6からV1.3の確定版が利用できる様になった。 Waifu Diffusion V1.3 新しいWaifu Diffusion V1.3を試すことができる。ダウンロード先は下記URL。但しリポジトリのモデルは最終モデルのプレビューでトレーニングはまだ進行中とのこと(現在EP…

furry_epoch4.ckpt 可愛い動物キャラのモデル公開

furry_epoch4.ckptで生成 可愛い動物キャラモデルfurry_epoch4.ckpt 可愛い動物キャラ(furry・ケモノ)に特化したモデル:furry_epoch4.ckpt が公開された。 Stable Diffusionで動物キャラクターを作っている方にお知らせついに動物キャラ(furry・ケモノ)に特…

【抜群】NovelAI Diffusionの利用方法

NovelAIでお約束の魔法のプロンプトcute cat ear maid NoveiAIのAI画像サービスが始まる 本日(米国10/2)にNovelAIのtxt2imgサービスが開始されたので早速使ってみた。ログイン先は以下の通り。 novelai.net NovelAIDiffusion NovelAIはMidJourney等と同じ…

【利用方法一覧】AI画像生成サービスやアプリの紹介

MidJourney、Stable Diffusion、DALL-E2の作例 2022.10.3 追記 10月3日からサービスを開始したNovelAIDiffusionを追加 AI画像の生成方法が増えてきた AIによる画像生成は日々新情報が入るホットな状態だが、選択肢が色々と増えた関係で情報が氾濫している。…

【機能向上】Diffusion Bee - Stable Diffusion GUI App for M1 Mac

M1/M2 Mac向けGUIアプリ この記事では改めてM1のAI画像生成アプリ:Diffusion Bee の紹介とインストール手順を記載する。 以前にM1/M2 Macに対して環境を構築してStable Diffusionを使う記事を書いた。こちらの記事の内容は各プロセスを自分で実装することを…

Phenaki、Make-A-Video プロンプトで動画を生成

AIによる動画生成 これまでAIで生成された画像を利用するアニメーションや動画の発表がされてきたが、プロンプトによる動画生成が行えるAIが登場した。 ①Phenaki phenaki.video Phenalkiの発表より: 今回、プロンプトでシーケンスを与えると現実的なビデオ…

Stable Diffusion for Photoshop 0.3.3

Stable Diffusion for Photoshop 0.3.3 DreamStudioと連動して使えるPhotoshop向けのアドインツール「Stable Diffusion for Photoshop」の新バージョンが使えるようになった。img2imgと、マスク連動のinpainting機能が追加されるなど、Photoshopの優れた編集…

【モデル化対応】DreamBoothをGoogle colabで使う

愛犬をサントリーニ島にワープさせた 2022.10.3追記 後述のノートブック①に、DreamBoothで学習させた新コンセプトを元のモデルにマージして、自分だけのオリジナルのモデルを作る機能が追加された。 学習させたモデルをAUTOMATIC1111で利用できるようになっ…

【一覧】AI画像生成に便利な写真集やイラスト集

多数存在する写真やイラストのサイト AIに対して、自分が撮影した写真や描いた絵を手本として渡すのもよいが、優れた作品がネットに無尽蔵にあるので、それらを活用するのも良い選択と考える。無料で入手できるものも多い。少し説明した後に、写真やイラスト…