これまでの同社による最高記録は2023年の53.3%だったが、今回はこれを大きく上回った。計150問中、111問が正答となっている。これは直近5年間における弁護士試験の選択式試験における合格者の平均正答数(103問)を上回る。
こうした結果は米オープンAIによる「GPT-4.5 Claude 3.7 Sonnet」をはじめとした最新AIモデルの正答率をも越えるものとなっている。「GPT-4.5 Claude 3.7 Sonnet」に同一の試験問題を入力して評価した結果、正答率は49.3%にとどまった。
スーパーローヤーは2024年7月、同社が法律家を対象に提供を開始した生成AI法律秘書サービスだ。大規模言語モデル(LLM)を活用しており、これにロー&カンパニーによるアーキテクチャを適用している。同社が保有する495万件の判例や法令データなど膨大な法関連データを含んでいる。また最近では、法律関連書籍の出版社である博英社による約600冊の法律書を学習していた。
Copyrights(C) Edaily wowkorea.jp 101