Mmaiqai.com
🚀 Chương 7 · Luyện đề

Luyện đề: Kiểm thử trong phát triển ML

2 câu hỏi trắc nghiệm bám sát đề thi thật CT-AI. Trả lời hết rồi bấm "Nộp bài" để xem điểm và giải thích từng câu.

📎 Nguồn: 2 câu hỏi dưới đây trích nguyên văn từ bộ đề mẫu chính thức ISTQB® Certified Tester AI Testing — Sample Exam Set A v2.1 (© International Software Testing Qualifications Board), dùng cho mục đích học tập/luyện tập phi thương mại, có ghi rõ nguồn. Đề & đáp án giữ nguyên tiếng Anh như bản gốc để sát với đề thi thật.Tác giả bộ đề: Klaudia Dussa-Zieger, Stuart Reid, Vipul Koch, Kyle Siemens, Qin Liu, Werner Henschelchen, Jarosław Hryszko (theo mục Acknowledgements của tài liệu gốc).
Câu 1/2 (#39)· 1 điểm· LO AI-7.1.1· mức K2

Which TWO of the following scenarios describe ML development risks that can be EFFECTIVELY mitigated by performing ML functional performance testing?

🇻🇳 Xem bản dịch tiếng Việt

HAI kịch bản nào sau đây mô tả các rủi ro trong phát triển ML có thể được giảm thiểu HIỆU QUẢ bằng cách thực hiện ML functional performance testing?

  • a) Một đội nhận thấy ML development framework của họ trở nên chậm và thậm chí không phản hồi khi xử lý các batch dữ liệu lớn
  • b) Một phiên bản mới của thư viện lõi (core library) được dùng bởi ML development framework có vẻ đang khiến mô hình ML tạo ra kết quả ngoài dự kiến và không chính xác
  • c) Sau một lần cài đặt mới, đội phát triển cần một bài test nhanh để xác định liệu các dịch vụ thiết yếu của ML development framework có đang chạy đúng hay không
  • d) Một kết quả test đơn lẻ khó tái lập trong quá trình đánh giá, cho thấy những biến thiên nhỏ về hiệu năng chức năng ML qua mỗi lần thực thi
  • e) Một trưởng dự án cần quyết định giữa hai thuật toán tiềm năng dựa trên mức độ phù hợp của chúng với mục tiêu dự án
Câu 2/2 (#40)· 1 điểm· LO AI-7.1.2· mức K2

Which of the following statements CORRECTLY describes how shadow testing differs from canary testing in the deployment of ML models?

🇻🇳 Xem bản dịch tiếng Việt

Phát biểu nào sau đây mô tả ĐÚNG sự khác biệt giữa shadow testing và canary testing khi triển khai mô hình ML?

  • a) Shadow testing ảnh hưởng đến phản hồi của người dùng thực, trong khi canary testing không liên quan đến người dùng thực
  • b) Shadow testing nhân bản (mirror) lưu lượng mà không ảnh hưởng đến người dùng, trong khi canary testing cung cấp phản hồi từ mô hình ML mới
  • c) Canary testing được dùng cho performance testing, trong khi shadow testing chủ yếu được dùng cho component integration testing
  • d) Canary testing so sánh các mô hình ML chạy offline, trong khi shadow testing dựa trên việc sử dụng dữ liệu người dùng thực tế