Execution Context
Theo dõi Thí nghiệm trong Phát triển Mô hình cho phép giám sát toàn diện các thử nghiệm học máy. Nó ghi lại các siêu tham số quan trọng, đặc điểm dữ liệu đầu vào và các số liệu mô hình kết quả theo thời gian thực. Chức năng này hỗ trợ các khuôn khổ thử nghiệm A/B nghiêm ngặt bằng cách duy trì các nhật ký kiểm toán bất biến cho mọi công việc tính toán. Bằng cách tổng hợp kết quả trên nhiều nút tính toán, nó tạo điều kiện cho các chu kỳ lặp lại nhanh chóng và đảm bảo rằng các cấu hình thành công có thể được tái tạo ngay lập tức để triển khai sản xuất.
Hệ thống này thu nhận các luồng đo từ các cụm huấn luyện phân tán để ghi lại các cập nhật chỉ số tần suất cao trong các giai đoạn hội tụ mô hình.
Các cơ chế gắn thẻ tự động tương quan các tổ hợp tham số cụ thể với các điểm bất thường về hiệu suất, tạo ra cảnh báo phát hiện bất thường để can thiệp ngay lập tức.
Dữ liệu thí nghiệm lịch sử được lập chỉ mục trong luồng tính toán để cho phép phân tích theo chiều dọc về sự trôi dạt của mô hình và xu hướng hiệu quả huấn luyện.
Operating Checklist
Khởi tạo cấu hình thí nghiệm với các siêu tham số và lược đồ tập dữ liệu đã xác định.
Triển khai công việc huấn luyện lên cụm tính toán đồng thời thiết lập các móc giám sát.
Thu thập và tổng hợp các luồng số liệu trong suốt vòng đời huấn luyện đang hoạt động.
Lưu kết quả cuối cùng vào các bản ghi thử nghiệm có phiên bản để truy xuất.
Integration Surfaces
Giao diện Bảng điều khiển
Các bảng trực quan hóa thời gian thực hiển thị quỹ đạo số liệu trực tiếp, cho phép xác định ngay lập tức các lỗi hội tụ hoặc tắc nghẽn tài nguyên.
Cổng API
Các điểm cuối có cấu trúc cung cấp quyền truy cập theo chương trình vào siêu dữ liệu thử nghiệm để tích hợp với các hệ thống điều phối quy trình làm việc bên ngoài.
Bộ máy cảnh báo
Các quy tắc ngưỡng có thể cấu hình sẽ kích hoạt thông báo tự động khi các chỉ số hiệu suất quan trọng sai lệch so với tiêu chuẩn cơ sở dự kiến.
