wandb

本

wandbを使ってくださっている方々の記事をちょっと使ってみた系からAdvancedなTipsまで幅広くまとめていくマガジンです。 wandbは、エンタープライズグレードのエン…

運営しているクリエイター

#deep_learning

torchtuneとWandBを使ったLlama3.1のファインチューニングと自動評価

Weights & Biases のNoteをフォローしてくださいはじめにこの一年あまりの間にOpenLLMの性能は飛躍的に向上してきました。その中でも、Meta社のが開発した大規模言語モデル：LlamaシリーズはOpenLLMに非常に強力なベースラインを築き、かつその水準を継続的に向上させてきました。その最新版がLlama3 (Llama3.1)です。本記事では、このLlama3の特徴と可能性、そしてそのポテンシャルを引き出すためのファインチューニング技術について深く掘

WandB LaunchのSageMaker連携によるLLMの自動評価

こんにちは、W&Bの山本です。今回は、WandB Launchを使用してAmazon SageMakerでllm-jp-evalの評価を自動化し、LLM勉強会(llm-jp)にご提供したユースケースを紹介したいと思います。 WandB LaunchのSageMaker連携では例えばモデルIDを入力して１クリックするだけ、あるいはレジストリから自動的に評価ジョブをSageMakerに投げることで、LLMモデル評価をインスタンスのプロビジョニングも含めて自動実行することができます

Fully Connected 2024サンフランシスコイベントカバレージ - メルカリ Teo Narboneta Zosa様

本記事は2024年4月18日にサンフランシスコで開催されたFully Connected 2024: The Era of Generative AIのイベントカバレージです。第１弾は日本のお客様からのご登壇でメルカリのTeo Narboneta Zosa様。ご講演タイトルは「How Mercari Is Using Gen AI To Define The Future Of Japanese C2C E-Commerce（メルカリはどのように生成AIを活用し、日本のC2C

八千代エンジニヤリング様〜 AIによるインフラ維持管理の高度化への挑戦

日本の社会インフラの設計・施工管理を担う建設コンサルタントの八千代エンジニヤリング様。同社は近年、インフラの維持管理業務におけるAI活用を推進し、建設業界のDX化を牽引している。同社技術創発研究所のAI解析研究室で室長を務める藤井純一郎氏と研究員の都築幸乃氏に、建設業界におけるAIの活用状況と、同社の取り組みについてインタビューにご回答を頂きました。建設業界におけるAI活用の障壁とは藤井氏によれば、建設業、特にインフラの維持管理分野におけるAI活用の障壁は「データの質と

W&B製品ニュースレター: 2024年3月のアップデートと新機能

3月に取り組んでいたことを簡単にご紹介します。本記事はJustin Tenutoによる英文記事の日本語訳（自動翻訳）です。私たちは、W&B史上最もリクエストの多かったユーザ機能を含む、多くのエキサイティングな新製品アップデートをお届けしますが、少し異なるものから始めたいと思います:弊社の間もなく開催される第2回年次Fully Connected カンファレンス: 生成AIの時代のお知らせです！ 4月18日木曜日、サンフランシスコで開催されるこの集まりは、MLプロフェッ

技術書典15でWandBの新刊を出しました！

Weights & Biases Japanの山本です。今回は現在開催中（2023.11.11-2023.11.26, オフライン開催は2023.11.12終了）の技術書典で新刊「WandBで始める実験管理 - MLOpsからLLMOpsまで」を頒布しておりますのでご紹介いたします。 WandBはML開発において産業界・アカデミアを問わずこれほど広く活用頂いているにも関わらず、日本語のまとまった情報源は限られていました。また、公式ドキュメントは網羅的でこそありますが、エンジ

W&B Automationsを用いたモデルCIのチュートリアル

W&B Automationsを使用して、すべての新しい候補モデルに対して評価を実行する例をご紹介します（ハンズオン用Colabはこちら）。本ブログ記事はCarey Phelps, Thomas Capelleによって執筆され、W&B Fully Connectedで公開された"A Tutorial on Model CI with W&B Automations"の日本語訳です。イントロダクションこのレポートでは、Weights & BiasesのAutomatio