ChatGPT, Другие модели ИИ могут быть такими же хорошими, как и юристы-люди; Улучшить результаты экзамена на адвоката Оставить комментарий

GPT-4, обновленная модель искусственного интеллекта, выпущенная на этой неделе компанией OpenAI, поддерживаемой Microsoft, набрала 297 баллов на экзамене на адвоката.

ИИ также хорошо показал себя в других стандартизированных тестах, включая SAT и GRE

Согласно новому исследованию, опубликованному в среду, искусственный интеллект теперь может превзойти большинство выпускников юридических вузов на экзамене на адвоката — изнурительном двухдневном экзамене, который должны пройти начинающие адвокаты, чтобы практиковать юриспруденцию в Соединенных Штатах.

GPT-4 , обновленная модель искусственного интеллекта, выпущенная на этой неделе компанией OpenAI, поддерживаемой Microsoft, набрала 297 баллов на экзамене на адвоката в ходе эксперимента, проведенного двумя профессорами права и двумя сотрудниками юридической технологической компании Casetext.

Это ставит GPT-4 на первое место. Исследователи обнаружили, что это 90-й процентиль реальных сдающих экзамен, и этого достаточно, чтобы быть допущенным к юридической практике в большинстве штатов.

Экзамен на адвоката оценивает знания и аргументацию и включает в себя эссе и тесты производительности, предназначенные для моделирования юридической работы, а также вопросы с несколькими вариантами ответов.

«Большие языковые модели могут соответствовать стандарту, применяемому к юристам-людям почти во всех юрисдикциях в США, решая сложные задачи, требующие глубоких юридических знаний, понимания прочитанного и умения писать», — пишут авторы.

Менее четырех месяцев назад двое из тех же исследователей пришли к выводу, что более ранняя большая языковая модель OpenAI, ChatGPT, не набрала проходного балла на экзамене на адвоката, что свидетельствует о том, насколько быстро технология совершенствуется.

Новая GPT -4 правильно ответили почти на 76 % вопросов с несколькими вариантами ответов на экзамене Bar, по сравнению с примерно 50 % для ChatGPT, что на 7 % больше, чем у среднего человека.

Национальная конференция адвокатов-экспертов, разрабатывающая раздел с несколькими вариантами ответов, заявила в среду, что адвокаты обладают уникальными навыками, полученными благодаря образованию и опыту, с которыми «ИИ в настоящее время не может сравниться».

Соавтор исследования Дэниел Мартин Кац, профессор юридического колледжа Чикаго-Кент, сказал в интервью, что его больше всего удивила способность GPT-4 давать в значительной степени актуальные и связные ответы на эссе и тесты производительности.

«Я слышал так много люди говорят: «Ну, он может получить множественный выбор, но никогда не получит эссе», — сказал Кац.

ИИ также хорошо показал себя на других стандартизированных тестах, включая SAT и GRE, но экзамен на адвоката привлек больше внимания. OpenAI рекламировала свой проходной балл, когда объявила о выпуске последней модели во вторник.

Наставник экзамена на адвоката Шон Сильверман объяснил, что акцент на экзамене на адвоката был широко признанной сложностью. В этом году процент сдачи экзамена на получение лицензии адвоката впервые составил 78 % среди тех, кто провел три года в юридической школе.

Сильверман сказал, что люди могут быть менее впечатлены, узнав, что ИИ может сдать тест, предназначенный для старшеклассники, такие как SAT, «вместо теста, чтобы стать юристом».

© Thomson Reuters 2023
 

От смартфонов со сворачиваемыми дисплеями или жидкостным охлаждением до компактных очков дополненной реальности и телефонов, которые могут быть легко отремонтированы их владельцами, — мы обсуждаем лучшие устройства, которые мы видели на MWC 2023, в подкасте Orbital, Gadgets 360. Orbital доступен на Spotify, Gaana, JioSaavn, Google Podcasts, Apple Podcasts, Amazon Music и везде, где вы получаете свои подкасты.
Партнерские ссылки могут создаваться автоматически — подробности см. в нашем заявлении об этике.