「新しい画像生成AIについて知りたい」このような場合には、この記事の内容が参考になります。IF」について解説しています。IFは家庭用PCで動くのか?それでは、上記に沿って解説していきます。IFのモデルが、公開されました。IFをローカル環境で動かしたい」このような場合には、この記事の内容が参考になります。IFのインストール・使い方を解説しています。IFとは、DeepFloydが開発している画像生成AIのことです。AI社に存在する開発チームとなります。2022年11月にTwitter上で、DeepFloydのアカウントが作成されています。IFで生成した画像を投稿しています。Face上でも公式ページが用意されています。https://huggingface.co/DeepFloydただし、現状では何も登録はされていません。参加メンバーのTwitterアカウントには、それらしき情報が記載されています。このDeepFloydが開発している「IF」には、次の特徴があります。Diffusionの数段上のレベルだと言われています。それは、投稿されている画像からもわかります。Diffusionでもこのレベルの画像は生成可能です。モデルとプロンプト次第で何とでもなります。してもテキストだけはダメです。Diffusionではテキストを表示できないのです。IFの最大のウリはテキスト表示だと感じます。サンプル画像を見るしかできない段階の感想です。実際に画像を生成してみたら、全然違う意見を言っているかもしれません。プロンプトの反映に関しては、自分で試さないと本当のところはわかりませんからね。Diffusionよりも数段上と言われるのでしょうか?それは、採用している技術のImagenにあります。IFについて説明しました。次は、Imagenについて説明します。Imagenとは?Imagenとは、Googleが開発した画像生成AIのことです。Diffusionと同じく、テキストから画像を生成することができます。Imagenは、これらの画像生成技術の中では圧倒的なパフォーマンスを示しています。Diffusionは、LDMに該当すると考えてもよいでしょう。Models(拡散モデル)という点では、以下の3つは同類と言えます。Diffusion(LDM)Imagenそのような状況で、なぜImagenはこれほどまでのパフォーマンスを出せるのでしょうか?その要因の一つには、大規模言語モデルがあると言われています。その大規模言語モデルは、T5-XXLになります。Facehttps://huggingface.co/google/t5-v1_1-xxlT5-XXLのモデル容量は、約45GBです。こんな大きなモデルを利用したら、プロンプトの理解力も上がりますよね。そんなGoogleの最終兵器的なImagenは、公開されていません。その論文が公開されただけです。ソースを公開してしまうと、ヤバいとGoogleは考えたのでしょう。IFではImagenの技術が用いられています。以上、Imagenについて説明しました。IFにおけるImagenはimagen-pytorchを説明します。IFにおけるImagenは、imagen-pytorchであると言われています。imagen-pytorchとは、Lucidrains氏が開発したリポジトリです。Lucidrains氏は、論文をもとにソースコードを作り出す謎の天才技術者になります。そのLucidrains氏によって、ImagenがPyTorchベースで開発されました。それが、imagen-pytorchということです。GitHub上のページは、以下。lucidrains/imagen-pytorchhttps://github.com/lucidrains/imagen-pytorch上記ページにおいては、次のような記述が確認できます。日本語だと、次のようになります。IF開発への協力を依頼したと噂されています。噂レベルであるため、真相はわかりません。Todoは順調にクリアされている状況です。2023年1月18日時点で、62個中41個がクリアされています。バージョン管理も細かく行われています。IFに協力しているのでしょうね。IFにおけるImagenはimagen-pytorchを説明しました。IFは家庭用PCで動くのかどうかについて説明します。24GBは必要という話もあります。3090か4090ぐらいしか選択肢はありません。当初はそうだとして、すぐに必要メモリは下がると思います。DreamBoothも出た当初は、40GBのVRAMが必要と言われていました。今では10GB以下の環境でもDreamBoothは動くようになりました。実際、そうなっていかないと普及はしていかないと思います。IFについても必要VRAMは下がるはずです。IFは家庭用PCで動くのかを説明しました。「動画から対象物を違和感なく自然な感じで取り除きたい」このような場合には、この記事の内容が参考になります。Diffusionがオススメです。機械学習Amazonレビューをセンチメント分析(感情分析)する【Python】Amazonのレビューをセンチメント分析(感情分析)する方法を説明しています。ヒストグラムの表示まで、この記事だけ多くを学ぶことが可能です。「プログラムで自動的に画像・映像をモザイク加工したい」このような場合には、DeepMosaicsがオススメです。この記事では、モザイク追加・除去が可能なAIツールDeepMosaicsをインストールする方法を解説しています。「AI美女を簡単なプロンプトで作成したい」「利用者の多いAIグラビア生成モデルを探している」このような場合には、BRAV5がオススメです。この記事では、AI美女を簡単なプロンプトだけで生成できるBRAV5について解説しています。Yourselfでディズニー顔への変換ができます。YourselfをWindowsで動かすことは、機械学習の勉強にもなり、同時に単純に楽しいです。Yourselfを動かす方法を解説しています。「ローカル環境のimg2imgが急に動かなくなった・・・」この記事では、img2imgでエラーが出る場合の対応方法を解説しています。diarizationがオススメです。diarizationについて解説しています。DiffusionのNSFWコンテンツ対策を無効化する方法2022.08.262022.09.30PyTorchのインストール失敗時にチェックすべきこと2022.03.082022.03.22self_developmentプロフィールself_developmentをフォローするタイトルとURLをコピーしました。