深層学習による自然言語処理のコーパス まとめ

 深層学習による自然言語処理のコーパスをまとめました。

1. テキスト分類

◎ livedoor ニュースコーパス

ダウンロード - 株式会社ロンウイット

◎ 単語感情極性対応表

PN Table

◎ 日本語評価極性辞書
https://www.cl.ecei.tohoku.ac.jp/index.php?Open%20Resources%2FJapanese%20Sentiment%20Polarity%20Dictionary

◎ Twitter日本語評判分析データセット

Twitter日本語評判分析データセット

◎ SMS Spam Collection Data Set

UCI Machine Learning Repository: SMS Spam Collection Data Set

◎ 20 Newsgroups

Home Page for 20 Newsgroups Data Set

◎ Large Movie Review Dataset

Sentiment Analysis

2. 質問応答

◎ 運転ドメインQAデータセット

Driving domain QA datasets - KUROHASHI-CHU-MURAWAKI LAB

◎ SQuAD2.0

The Stanford Question Answering Dataset

3. 要約

◎ livedoorニュース 3行要約データセット

KodairaTomonori/ThreeLineSummaryDataset

◎ wikiHow-Japanese

Katsumata420/wikihow_japanese

◎ WikiHow-Dataset

mahnazkoupaee/WikiHow-Dataset

4. 言語モデル

◎ wiki40b

wiki40b  |  TensorFlow Datasets

5. ベンチマーク

・GLUE

GLUE Benchmark

・SuperGLUE

SuperGLUE Benchmark

6. 音声合成・歌声合成