【イベントレポート】LLMアプリケーションの評価の実践と課題 ~PharmaXにおける今後の展望~
こんにちは、尾崎(@FooOzaki)です。 PharmaXでは、月1ペースでテックイベントを開催しています。
7月は「LLMアプリケーションの評価の実践と課題 ~PharmaXにおける今後の展望~」というテーマでイベントを開催しました。
PharmaXでは、薬剤師がチャットする内容をLLMでサジェストするシステムを本番運用しており、マルチエージェントの仕組みを取り入れています。
このマルチエージェントの精度を継続的に改善していくための評価方法として、LLM-as-a-