最新AI研究&検証

本

最新AIの最前線に立つ技術、理論、応用を深掘りするマガジンです。検証結果や研究の記事をまとめています。

運営しているクリエイター: SUTO💡

#AIとやってみた

ここ半年くらいでこれはすごいな〜と思ったAIツール5選

2024年に入ってもう6月ですね。はやいはやい。なんとなく試してみたAIツールをメモ的にnoteに残し続けていて、ある程度のことでは驚かなくなったわたしですが、それでも日々進化するAIをいじっているとたまにハッとすることがあります。この激動の数ヶ月を振り返ってみたいなとふと思い、せっかくなのでその中でも特にすごいなと感心した５つのツールを紹介したいと思います。高性能ディープフェイク動画作成AIツール「FaceFusion」FaceFusionは顔認識技術を利用し使い

一枚の画像から多角視点の複数の高解像度の画像を生成する「Era3D」を試してみる

今回試してみる「Era3D」は一枚の画像から多角視点の複数の高解像度の画像を生成してくれます。同時にノーマルマップも合わせて生成してくれるという優れもの。いままで一枚の画像から3Dデータを生成するというものはいくつかありました。こちらは画像の出力です。どんなものか気になりますね！ Era3Dの特徴Era3Dは、単一画像から高解像度のマルチビュー画像を生成する新しい手法とのこと。調べてみると特に以下の2つの技術革新がありました。カメラ予測モジュール：ディフュージョン

画像に照明効果を付与できるIC-LightをComfyUIで試してみる

ControlNetの開発者であるlllyasviel氏が画像に照明効果を付与できる「IC-Light」を作っていて、その性能のよさにXでも話題になったのでいじってみたいと思います！こちらもControlNet同様オープンソース。素晴らしい🥳 プロジェクトページ🌐プロジェクトページ類はこちら早速いじってみるデモのUIはこんな感じでした。ドレスを着たねこちゃんで試してみたのですが、とても良い感じに変換されました！話題になっているだけあって使い方や特性を公開してい

任意の画像に対する質問になんでも答えてくれるミニマムオープンソースAIツール「moondream」を試してみる

moondreamとはMoondream は任意の画像に対して現実世界の質問に答えることができるコンピュータービジョンモデル。オープンソースで配信されています。現在のモデル市場からすると非常に小さく、パラメーターは 16 億しかないとのこと。この小ささで、携帯電話などを含むさまざまなデバイス上でローカル実行できるようになっているのが売りみたいですね。プロジェクトページ類🌐プロジェクトページ類はこちら。試してみるmoondreamは超シンプルにアップロードした画像

Ollamaと連携してDifyでRAGチャットボットを完全無料で作って遊ぶ

前回すごいすごいと話題になってたDifyがオープンソースだと知りなんとなくインストールしてみました。今回はそれの続きです！ RAGチャットボット制作にはchatGPTのAPIを使ってもよかったのですが、せっかくなのでここまで来たらLLMも無料のもので全部無料でやりたい欲がでてしまい少し調べるとOllamaとの連携でDifyができる記事見つかりそれでやってみることにしました。ありがたや～！ということで記事通りにやってみた結果がこちら！超かんたん😊すばらしい😊😊😊

OllamaでMeta社製のオープンLLM「Llama3」を試してみる

今回はこれまでで最も高性能なオープンに利用可能な LLMと名高いMeta Llama 3を試してみたいと思います。 🌐 Meta Llama 3の詳しい説明はこちら👇 Xでも話題です！ Claude 3 SonnetやGPT-3.5等と比較しても優れていると評価されているとか…！！ということで早速このLlama3をOllamaで試してみたいと思います。 Ollamaを導入済みであればLlama3のインストールはこのコードを入れるだけ。 ollama run lla

世界観を保って画像生成するオープンなAIフレームワーク「InstantStyle」を試してみる

物語性を持たせたいときや画風や絵柄を安定させたいときに良さそうなオープンなAIフレームワーク「InstantStyle」。いままで絵柄安定といえばLoRA一択でした。そんななか、画像の写真をアップロードし、その画像スタイルで画像を生成するという LoRA 不要のインスタント生成はかなり便利そうだったので、ちょっと試してみようと思います。プロジェクトページ類はこちら！インストールした後のUIはこんな感じでした。オプションでも色々遊べそうですが、まずはシンプルに

Kritaと連携するリアルタイムで生成AIを動かす krita-ai-diffusionがすごい！！

Kritaって知ってます？Photoshopのような無料のお絵描きソフトです。（わたしは知りませんでした…）これが生成AIが動くと聞いてちょっと試してみました！まずはKritaをインストールします。以下URLが公式サイトです。ダウンロードからどうぞ！インストール時の参考サイトも載せておきます。 SDとの連携プラグインはいろいろあるようなのですが、今回は色々と話題のkrita-ai-diffusionを使おうと思います。インストール方法はとても丁寧に書いてあっ