LLM校正ツール開発とプロンプト性能評価手法について

はじめにLLM活用のアプリケーション開発受託、プロンプトエンジニアリングを行っているphilic.techの出野です。 10年後の我々が今日を振り返るとき、2024年はLLM活用アプリケーション元年となることでしょう。1年でLLMが搭載sされたアプリケーションが次々と生まれてきます。 私たちは、LLMを活用したアプリケーション開発のためのプロンプトエンジニアリングを行う過程で必要不可欠な、プロンプトの性能評価に注力いたしました。 今回のノートでは、プロンプトの性能評価のR&D