論文を読む

本

気になった論文などを読んでまとめ

運営しているクリエイター: はまち

#AIとやってみた

古い白黒写真をリアルにカラー化🎨DDColorを試す

学習可能なカラートークン(つまり、カラークエリ) を最適化することで、グレースケール画像をリアルなカラー画像をエンドツーエンドで変換する、「DDColor」というモデルが公表されていたので試してみました。モデル概要まず始めに、画像から重要な情報を抜き出すための「Backbone network」を使い特徴抽出を行います。次に、この情報を「Pixcel Decoder」に送り、画像の空間構造を復元します。同時に、「Color Decoder」は画像のさまざまな大きさ

画像セグメンテーション技術 SEEMとは？～arxiv論文「Segment Everything Everywhere All at Once」を読む

上記論文で提案された、マルチモーダルな画像セグメンテーション技術である「SEEM」の概要をまとめてみました。数学的な定義などは専門家にお任せして図表メインで説明します。なお、デモは以下で公開されており、ソースコードも近日中に公開されるとのことです。楽しみですね。実行サンプルまず、特徴的な実行サンプルの紹介からトラック形態のオプティマスプライム（映画トランスフォーマーに登場する主人公というか指揮官の機械生命体）のトラックヘッドの画像にざっくり印（黄緑の線）をつけておくと、