Huggingface Transformers 入門 (25) - 日本語の要約の学習
「Huggingface Transformers」による日本語の要約の学習手順をまとめました。
・Huggingface Transformers 4.4.2
・Huggingface Datasets 1.2.1
前回
1. 日本語T5事前学習済みモデルモデルは、「日本語T5事前学習済みモデル」が公開されたので、ありがたく使わせてもらいます。
2. 要約データセットの準備はじめに、「要約データセット」を準備します。
「ThreeLineSummaryDataset