ダークウェブ専用の言語モデル「DarkBERT」　闇取引の解明に一歩前進

論文：https://doi.org/10.48550/arXiv.2305.08596

ダークウェブでは特異な言葉が使用されているため、分析には新たな言語モデルが必要とされていました。
既存のモデルは表層ウェブのデータで訓練されているため、ダークウェブの特性を十分に捉えられません。

そこで研究者らはダークウェブから収集した大量のテキストデータで訓練した新しい言語モデル「DarkBERT」を開発しました。

DarkBERTはダークウェブの特異な語彙を理解し、意味や感情分析などの観点から優れたテキスト分析を提供します。

この技術により、人間の能力だけでは困難なダークウェブの監視や分析が効率化される見込みです。

※ダークウェブとは、検索エンジンで見つけることができず、一般的なウェブブラウザでは閲覧できないウェブサイトのことを指します。非合法な情報、マルウェア、麻薬などが取引されている場所です。