マガジンのカバー画像

エンジニアたちの「やってみた！」

44
本
さまざまなツールやライブラリを使って、朝日新聞のエンジニアたちが「やってみた」エントリを紹介します！　朝日新聞に登場したデータ活用や頭をやわらかくするクリエイティブなコンテンツま…
運営しているクリエイター
朝日新聞社 メディア研究開発センター

#LLM

朝日新聞社 メディア研究開発センター

朝日新聞社 メディア研究開発センター

LLMを使ったかな漢字変換

LLMを使ったかな漢字変換

こんにちは。メディア研究開発センターの山野です。私は普段は音声処理や自然言語処理やそれらの技術を使ったプロダクト開発などに従事しています。
さて今回は朝日新聞記事データを使ったニューラル仮名漢字変換について簡易な実験をしたのでその結果を共有します。

はじめに多くの問題を解くことができるLLMですが、ひらがな列Xをかな漢字混じり文Yへ変換する仮名漢字変換については、単語の読み方とその表記の関連性を

もっとみる
朝日新聞社 メディア研究開発センター

朝日新聞社 メディア研究開発センター

【LLM】Few-shot推論は言語化の壁を越えられるか

【LLM】Few-shot推論は言語化の壁を越えられるか

こんにちは。メディア研究開発センターの川畑です。

みなさん ChatGPT 使ってますか？便利ですよね。何か訊いたら大概のことは正確に教えてくれますし、論文等の文書もわかりやすくまとめてくれたりと万能な存在です。

そんな便利な ChatGPT もとい LLM (large language model) ですが、その知識を引き出すためには質問や指示をキチンと言葉にしなければいけません。ちゃんと

もっとみる
朝日新聞社 メディア研究開発センター

朝日新聞社 メディア研究開発センター

LLMは本当になんでも得意なの？TSUNAの文字数コントロールを検証

LLMは本当になんでも得意なの？TSUNAの文字数コントロールを検証

朝日新聞社メディア研究開発センター　田森です。

ゴールデンウィークがいよいよ始まりますね。メディア研究開発センターも4月には新年度を迎えワチャワチャしていましたが、月末になりようやく落ち着きを見せてきました。

ようやく、ようやく、要約。ということで、今回のテックブログは自然言語処理における要約タスクとLLMの最近について書いてみたいと思います。このブログは、NLP2024のワークショップ「生成

もっとみる
朝日新聞社 メディア研究開発センター

朝日新聞社 メディア研究開発センター

最近公開された日本語LLMを要約生成タスクで検証してみる

最近公開された日本語LLMを要約生成タスクで検証してみる

こんにちは。メディア研究開発センター（M研）の田口です。

最近、大規模言語モデル（以下、LLM）に関するニュースが毎日のように出ています。直近約1ヶ月の間にもOpenAIのAPIのアップデートが発表されたり、日本語のLLMが公開されたりしました。

少し前（といっても4月末）に「ChatGPT/OpenAI API/LLM活用事例～NewsPicksと朝日新聞の合同勉強会を公開」でLTをしました

もっとみる