マガジンのカバー画像

shi3z note

541
運営しているクリエイター

2023年11月の記事一覧

AIスーパーコンピュータ「継之助」 試運転 34Bモデルを動かしてみる

AIスーパーコンピュータ「継之助」 試運転 34Bモデルを動かしてみる

よし、A100 80GB単体では動作できなかった34Bモデルをいよいよ動かしてみるぞ!

と意気込んだものの、ダウンロードにガッツリ時間がかかるので二日寝かせた。

いよいよ試運転開始。A100 80GBx8が火を吹くぜ。
でもまだ本気は出さない。
A100 80GBx8の20%も使ってない。このくらいだと温度も高くならない。

shi3z@tsuginosuke:/mnt/hdd$ nvidia

もっとみる
AIスーパーコンピュータ「継之助」爆誕!とりあえずRAID0で12TBのディスクをインストールする

AIスーパーコンピュータ「継之助」爆誕!とりあえずRAID0で12TBのディスクをインストールする

ついにA100 80GBx8のマシンが稼働した。ここまで長かった。
まずGPUだけ先に届いて、次にNVLINKだけ届いて、さらに1.5ヶ月待ってやっとシャーシが届いて、その間にデータセンターとなる部屋を契約して、電気工事して、200V電源を用意して、机と椅子を組み立てて・・・朝から晩まで汗だくになりながら作業を行なった。

純正品はケチケチ仕様で発注したので1TBしかNVMeを入れてなかった。
V

もっとみる
日本語Wikipediaのマルチターン会話データセット10万個を作りました

日本語Wikipediaのマルチターン会話データセット10万個を作りました

GPT-3.5-Turboを使って、約一ヶ月かけて日本語のWikipediaの項目をもとに先生と生徒が会話するマルチターンデータセットを作りました。

GPT-3.5を使っているため取り扱いには注意が必要ですが、とりあえず「日本語の高性能LLM」を作ってみる実験はできるはずです。

GPT-4でもやってみようかなと思っていますが、GPT-3.5でも一ヶ月でかなりの出費があり、GPT-4で同じ分量の

もっとみる
ある程度長い文章の対義語をGPTにつくってもらった #GPTハッカソン24耐

ある程度長い文章の対義語をGPTにつくってもらった #GPTハッカソン24耐

対義語とは意外で面白いものである。

ネットミーム的なもので、こんなページもある。

ということで、GPTにある程度長い文章の対義語をつくってもらった。

お前はもう死んでいる
→ 私はまだ生きている

親父にもぶたれたことないのに
→ 子供には毎回なでられるたびなので

生殺与奪の権を他人に握らせるな
→ 自己の死生を無関与され義務を放つ

おまえの物はおれの物、おれの物もおれの物
→ 私には何

もっとみる
自力でコード書けない非エンジニアがGPT4新機能ハッカソン24耐で優勝する話

自力でコード書けない非エンジニアがGPT4新機能ハッカソン24耐で優勝する話


汝アプライせよ、さらば道は開かれん去る2023年11月17日、「GPT4ハッカソン24耐」というイベントが開催されました。
2023年11月6日にリリースされた、OpenAIのGPT-4を中心とした新しい機能を使って24時間で何か作ろう!と言うハッカソンです。

私はタイトルの通りコードが自力で書けないし、主催者のShi3zさんの開催告知には下記の通り「とにかくガチ勢だけ来てほしい」とあります。

もっとみる
一人でマーダーミステリー!AIゲームエンジンを作った #GPTハッカソン24耐

一人でマーダーミステリー!AIゲームエンジンを作った #GPTハッカソン24耐

ゲームを画像を通して自動的に作るシステムは開発に失敗したので、考え方を変えてゲームシナリオを半分だけ与えて、そのさきは自分で何とかするAIマダミスゲームエンジンを開発した。

プレイヤーは刑事に疑いをかけられた容疑者の立場で、色々と上手いことを言いながらうまく言い逃れることができるか考える。これもやはりGPT-4-1106によってコンテキスト長が長くなった今だからこそ一貫性のあるやり取りが可能にな

もっとみる
めちゃ雑なラクガキから超美麗イラストをリアルタイム生成するWebサイト(無料)

めちゃ雑なラクガキから超美麗イラストをリアルタイム生成するWebサイト(無料)

表題の通り。最近話題のLCM-LoRAを使ったWebサービスが公開されました。

オープンソースなのでソースも見れる。

プロンプトに「girl」と入れれば女の子が、「robot」と入れればロボットが出てくる。別に何を入れてもいいし、いつものStableDiffusionのプロンプト芸みたいにしても良い。

新時代来たね

サム・アルトマンは解任されても、AIの進化は止まることを知らない。
GPT

もっとみる
作りたいゲームを指示すると概念図を作ってから概念図に基づいてゲームの開発計画を立て、自動的にプログラミングするアプリを作ろうとした #GPTハッカソン24耐

作りたいゲームを指示すると概念図を作ってから概念図に基づいてゲームの開発計画を立て、自動的にプログラミングするアプリを作ろうとした #GPTハッカソン24耐

tldrawに影響されて、なんとかこの性質を応用できないか考えたところ、言葉から概念図をまず作り、それに基づいて計画を立て、長いプログラム(128Kトークンを活用)を書かせるようなアプリを作りました。

GPT4でDALL-Eのプロンプトを書き、DALL-Eが概念図を描き、それをGPT-4Vが読み込んで開発計画を立て、GPT-4がゲーム本体を生成するという段取りです。

例えばブロック崩しだとまず

もっとみる
写真とプロフィールから将来の運命を予測するシンギュラリティ占いを作った #GPTハッカソン24耐

写真とプロフィールから将来の運命を予測するシンギュラリティ占いを作った #GPTハッカソン24耐

GPT4Vを使って写真とプロフィールを与えるとその人物の20年後の人生を想像し一日の物語を描く「シンギュラリティ占い」を作りました。

こんな感じのプロンプトを入れると

ついでに20年後の姿も描いてくれます

事務所の都合で写真は出せないが、知人の35歳経済キャスターでもやってみた。

なんか面白いやんけ

GPT4で漫画みたいなものを自動生成させる #GPTハッカソン24耐

GPT4で漫画みたいなものを自動生成させる #GPTハッカソン24耐

さっきの絵コンテ生成をもっと細かく画像生成するようにして、漫画っぽい表現ができるようにしてみた。

一行ごとに画像生成させてみる。

ロボットアニメを作らせたら結構ロボットアニメっぽくなった。
ソースコードは以下

GPT4を使って雑な絵を描くだけでロジックも入ったコードを書いてくれるOSS

GPT4を使って雑な絵を描くだけでロジックも入ったコードを書いてくれるOSS

tldrawというオープンソースを魔改造して、雑な絵からロジックも入ったコードを生成してくれる頭のおかしいツールが今流行っている。

要するに

こんな適当な絵を描いて「Make Real」ボタンを押すと・・・

Number Count Upは自動的にカウントが上がり、Clockはリアルタイムな時計になり、「Picture of girl」はインド風の少女を出している。すごい。

しかもこれ、完

もっとみる
GPTハッカソン24耐で絵コンテ自動生成ツールを作った

GPTハッカソン24耐で絵コンテ自動生成ツールを作った

ZETA株式会社の10万円の賞金を賭けてnote社のオフィスを借りたGPTハッカソン24耐。

僕もちょろっとプログラムを書いてみた。やっぱり周りでわちゃわちゃやってると捗る。

GPT4の最大の特徴だと僕が思っているのが、128Kコンテキスト長対応。
これがあれば極端な話、本一冊書けるはず。しかもDALL-Eもあるから挿絵付き。

というわけで一行だけテーマを入れたらお話を作ってくれる物語自動生

もっとみる
Copilot Studioを使ってみた。注意点と実際にかかるお金の話など

Copilot Studioを使ってみた。注意点と実際にかかるお金の話など

Copilot StudioはMicrosoft 365 E5というお高いパッケージに入らないとプレビュー版すら使えないらしい。

仕方ないので会社で入りましたよ。会社に所属してるのは3人だけど、E5だと25人分のアカウントがついてくる。

しかし!!!
金さえ払えば使えるというほどイージーなものではなかったので皆さんにお伝えします。ちなみにE5に入っただけで月額45000円(1800円x25で)

もっとみる
200Kトークン対応34BモデルNous-Capybaraをローカルで試す

200Kトークン対応34BモデルNous-Capybaraをローカルで試す

Nous-CapybaraはNous社によるYi 34Bのファインチューニングモデルだ。
RedditでGPT-4やGoliath120B(ゴリアテ)などとさまざまな比較が行われていて興味が出たので試してみた。

このスレ主はドイツのウルフラム・レイブンウルフ氏で、結論だけ言えば、さまざまな言語モデルを「ドイツ語の」専門的なデータセットによって試験した結果、1位がGPT-4 API、二位が2ビット

もっとみる