記事一覧
RTX3060上でJapanese StableLM Base AlphaをLoRAファインチューニングする
2023/08/12: Windows版のbitsandbytesのインストール方法について追記しました。
2023/08/12: PEFTのインストール方法と、学習後に保存されたLoRAモデルの読み込み方法について追記しました。
導入先日、Stability AI Japanから日本語の大規模言語モデル(LLM)として、70億パラメータの「Japanese StableLM Alpha 7B」
いまの人工知能に足りないものとは? -脳型人工知能による次世代のAI革命- (1)
ここ数年、「AI」(人工知能)という単語を多く耳にするようになった。この近年のAIブームはディープラーニング(深層学習)と呼ばれる技術の発展によるところが大きい。深層学習の進歩により、画像認識や言語処理などの分野では著しい成果をあげたが、一方でその技術が過大評価されているという意見も強く、過剰な期待が崩壊することによってAIブームは「冬の時代」に向かうのではないかという予想もされている。
事