速報 · 台北時間

OpenAI、日常の用事を題材にしたベンチマーク「LifeVal」を公開

一句重點:モデルが日々の用事をこなす力を測る指標です。

發生什麼事

@OpenAI が公開したベンチマーク「LifeVal」は、できたばかりではありません。OpenAIは、過去1年間、自社モデルの日常の用事への対応力を測り、改善するために使ってきたと説明しています。設問は数千人のChatGPTユーザーが個人アシスタントに期待することを参考に、保育、行政サービス、家計などを対象としています。設計や改善効果は公式発表に基づき、本サイトでは実測していません(🗣 自述)。

01出典

  • @OpenAI:OpenAIがLifeValベンチマークを発表。投稿には公式サイトのLifeValページへのリンクが添えられています。