
Why Accuracy Isn't Enough: A New Quality Model for Real-World ML Components
AI components, whether traditional machine learning or generative AI, are embedded in many present-day systems. However, despite advances in automation, infrastructure, and tooling for developing AI components, many do not leave the prototype stage or reach production because they fail to meet overall system quality expectations. In our latest podcast from the Carnegie Mellon University Software Engineering Institute, Rachel Brower-Sinning and Robert Edman, both machine learning scientists in the SEI's Tactical Edge and AI-Enabled Systems Initiative, sit down with Grace Lewis, the initiative's lead and an SEI principal researcher, to discuss a quality model for machine learning components to support their prop...
Mở trình phát: toàn bộ bản ghi, mọi từ đều bấm được, kèm bản dịch và thẻ ghi nhớ.
Tập này có hợp với bạn không?
B2 · Trung cao cấp
Thoải mái nếu bạn đã theo dõi được bản tin truyền hình
- 71% số từ ở mức B1 hoặc dễ hơn.
- 193 từ mỗi phút: tự nhiên, khá nhanh.
- 130 từ khó hơn (từ B2 trở lên) trong cả tập.
Thử ngay: chạm vào bất kỳ từ nào
Những câu thật từ đầu tập này. Mỗi từ đều được đánh dấu cấp độ.
is this concept of a system.
, .
So why shouldn't we treat it like software, right?
Chạm vào một từ để xem nghĩa bằng ngôn ngữ của bạn.
Bạn có biết những từ này không?
8 từ khó hơn trong tập này. Chạm vào một từ để xem nghĩa, rồi đánh dấu nó.
Đánh dấu vài từ, chúng tôi sẽ cho bạn biết tập này có hợp trình độ của bạn không.
Tập này có hợp với bạn không?
B2 · Trung cao cấp
Thoải mái nếu bạn đã theo dõi được bản tin truyền hình
- 71% số từ ở mức B1 hoặc dễ hơn.
- 193 từ mỗi phút: tự nhiên, khá nhanh.
- 130 từ khó hơn (từ B2 trở lên) trong cả tập.
Bản ghi
Phần mở đầu của tập. Toàn bộ bản ghi có trong trình phát.
từ khó hơn (B2+)
Going back to what I think differentiates our work from other work that I see out there, is this concept of a system. So if you think about what a machine learning component is, it is software. So why shouldn't we treat it like software, right?
And so when you say the requirements that come from the system, I think that is very important because when you do system decomposition, it so happens that at some point you're going to say, okay, this should be a machine learning component.
And so the requirements for that component are being derived from the system. And that is where it's important to be able to say, say, okay, what can I test at the ML component level? Today, AI components, whether traditional machine learning
Đó là phần mở đầu. Phần còn lại của tập (23 phút) có trong trình phát: mọi từ đều bấm được, kèm bản dịch, từ đã lưu và thẻ ghi nhớ.
Tiếp tục trong trình phátĐược tạo tự động từ âm thanh. Có thể chứa lỗi. Âm thanh thuộc về nhà xuất bản và được phát từ nguồn cấp của họ. Chủ sở hữu quyền có thể yêu cầu gỡ bỏ — chính sách bản quyền và gỡ bỏ