On AI Evals, TAR vs. LLMs and What Will be Different Next Year - Aron Ahmadia (VP Applied Science, Relativity)
Technically Legal - A Legal Technology and Innovation Podcast

On AI Evals, TAR vs. LLMs and What Will be Different Next Year - Aron Ahmadia (VP Applied Science, Relativity)

B2فوق المتوسط17 سبتمبر 202641 دقيقة
  • مقابلة
  • التكنولوجيا

In advance of this year's RelFest in Chicago, Aron Ahmadia, Vice President of Applied Science at Relativity, joins the podcast to discuss AI evaluation, AI benchmarking and the transition from traditional Technology Assisted Review (TAR) to generative AI in legal document review and eDiscovery. The conversation covers the daily operations of a global AI team, the concept of "evaluation as a product," and the methodology behind testing large language models (LLMs) for legal tasks. Aron also discusses a recent study that compared the accuracy and efficiency of TAR and human document review against Relativity's generative AI tool, aiR for...

تشغيل الحلقة

يفتح المشغّل: النص الكامل، وكل كلمة قابلة للنقر، مع الترجمة والبطاقات التعليمية.

جرّب: انقر أي كلمة

جمل حقيقية من بداية هذه الحلقة. كل كلمة معلَّمة بمستواها.

الجملة 1 من 12 · 0:00

electronic discovery and legal document review generally.

استمع إلى هذه الجملة

انقر كلمة لترى معناها بلغتك.

هل تعرف هذه الكلمات؟

8 كلمات أصعب من هذه الحلقة. انقر أي كلمة لترى معناها، ثم ضع علامتك.

  • B27:06
  • B28:33
  • B214:59
  • B216:30
  • B221:34
  • C126:13
  • B233:25
  • C138:00

ضع علامة على بضع كلمات، وسنخبرك بمدى ملاءمة هذه الحلقة لمستواك.

هل تناسبك هذه الحلقة؟

B2

B2 · فوق المتوسط

مريحة إن كنت تتابع نشرات الأخبار

A1 27‎%‎A2 33‎%‎B1 20‎%‎B2 17‎%‎C1 3‎%‎
  • 80% من الكلمات في مستوى B1 أو أسهل.
  • 192 كلمة في الدقيقة: كلام طبيعي وسريع نسبيًا.
  • 152 كلمة أصعب (B2 فما فوق) في الحلقة كلها.

النص

بداية الحلقة. النص الكامل في المشغّل.

0:00

This is Tech-to- electronic discovery and legal document review generally. So let me take you back to 1994. An imagine 12-year-old boy sitting in a small two-partner PI law firm, he's manually networking independent copies of DOS computers to install windows for

0:49

work groups. What this kid doesn't know yet back in 1994 is that this is his first step into a three-decade journey into legal technology. Fast forward to today and that same person is helping architect the future of AI for one of the biggest legal tech companies in the world. My guest today is Dr. Aaron Amadea. He's

1:07

the Vice President of Applied Science and Relativity. Like many people on the show, he had a background that wasn't necessarily legal before he ended up in the legal industry. Before leading AI Relativity, Dr. Amadea under PhD in Applied Math

كانت هذه بداية الحلقة. بقية الحلقة (41 دقيقة) في المشغّل: كل كلمة قابلة للنقر، مع الترجمة وحفظ الكلمات والبطاقات التعليمية.

تابع في المشغّل

تم إنشاؤه تلقائيًا من الصوت وقد يحتوي على أخطاء. الصوت ملك لناشره ويُشغَّل من خلاصته. يمكن لأصحاب الحقوق طلب الإزالة — سياسة حقوق النشر والإزالة