Haystack

Firmware 2026.11.9 trở lên

Haystack đặt mọi inspection mà một tool đã thực hiện lên cùng một bản đồ. Mỗi chấm là một inspection, và các hình ảnh tương tự sẽ nằm gần nhau. Các bộ phận không giống với bất kỳ thứ gì mà tool đã được huấn luyện sẽ nổi bật riêng lẻ, còn các bộ phận mà tool không chắc chắn sẽ nằm giữa các nhóm. Điều đó khiến nó trở thành cách nhanh nhất để trả lời câu hỏi: những hình ảnh production nào của tôi sẽ thực sự cải thiện mô hình này?

Haystack hoạt động với các tool AI Classification và AI Segmentation, cùng với các tool khác sẽ ra mắt. Nó hoạt động ở cả Setup và Production.

Mở nó từ menu bên trái: In Production > Haystack.

Tại sao nên sử dụng

Việc thêm rất nhiều hình ảnh huấn luyện một cách ngẫu nhiên hầu như chỉ lãng phí thời gian, vì mô hình đã xử lý được hầu hết chúng. Điều cải thiện một mô hình là những hình ảnh mà nó thấy khó: những hình ảnh gần ranh giới giữa hai lớp, và những hình ảnh không giống với bất kỳ thứ gì mà nó đã thấy. Haystack chỉ cho bạn thấy chúng ở đâu.

• Bắt được những điều bất ngờ. Các loại lỗi mới, thay đổi vật liệu và các sự cố chưa từng gặp sẽ nổi bật so với những gì tool mong đợi
• Cải thiện mô hình của bạn bằng dữ liệu production. Xem xét các trường hợp ranh giới, thêm chúng vào training set và huấn luyện lại
• Nhìn thấy vùng xám trong nháy mắt. Mỗi hình ảnh inspection trở thành một điểm. Các hình ảnh tương tự tụ lại thành cụm và các điểm ngoại lai nổi bật
• Xem mỗi lần huấn luyện lại đã thay đổi những gì. So sánh các phiên bản mô hình và xem từng phiên bản đã xử lý production như thế nào

Mở bản đồ của một tool

1. Mở In Production > Haystack.
2. Chọn Recipe, sau đó chọn Tool, ở góc trên bên phải. Hoặc cuộn xuống Pick a tool to open its haystack và nhấp Open bên cạnh tool. Recipe đang hoạt động được liệt kê đầu tiên.
3. Bản đồ sẽ mở ra. Nếu tool chưa được huấn luyện, nó sẽ hiển thị Train tool to start its map. Nếu nó đã được huấn luyện nhưng chưa inspection gì, các điểm sẽ xuất hiện khi nó inspection các bộ phận.

Bạn cũng có thể truy cập từ chính các tool: bước Learn của AI Segmentation có Open in Haystack, và bước teach của AI Classification hiển thị một bảng Haystack nhỏ với Expand.

Nếu không có recipe nào trên camera có tool AI Classification hoặc AI Segmentation, trang sẽ liệt kê các recipe mà bạn có thể mở thay thế.

Đọc bản đồ

Nhấp Guide, bên cạnh tiêu đề trang, để xem giải thích ngắn gọn luôn mở bên cạnh bản đồ trong khi bạn làm việc. Phần chú giải bên dưới bản đồ cho biết màu sắc, hình dạng và tô bóng của tool này có ý nghĩa gì.

Trên bản đồ	Ý nghĩa
Production ROI	Một inspection trên dây chuyền. Nhấp vào để xem hình ảnh phía sau nó
Training sample	Một hình ảnh mà tool đã được huấn luyện: những gì nó mong đợi
Training spread	Mức độ phân tán của các hình ảnh huấn luyện cho mỗi lớp
Reference region	Dung sai mà tool này kiểm tra

Camera cũng gắn cờ các chấm đáng chú ý:

Cờ	Ý nghĩa
Anomalous	Xa trung tâm lớp gần nhất hơn mức phân tán của các mẫu huấn luyện của lớp đó
Class disagreement	Được dự đoán là một lớp nhưng lại nằm gần nhất với một lớp khác
Low confidence	Confidence của dự đoán thấp hơn ngưỡng bạn đặt với Low confidence below
Outside training spread	Nằm ngoài phạm vi các mẫu huấn luyện của lớp của nó trên các trục này
Blobs truncated	Chỉ dành cho AI Segmentation: có nhiều blob hơn trong region này so với số lượng bản đồ giữ lại cho mỗi region

Đối với AI Segmentation, công tắc View ở trên cùng cho phép xem bản đồ theo Regions hoặc theo Blobs.

Thu hẹp phạm vi

• Model version hiển thị một phiên bản của mô hình, hoặc All versions. Phiên bản đang chạy trên dây chuyền được gắn thẻ Running. So sánh các phiên bản để xem một lần huấn luyện lại đã thay đổi những gì
• Captured between giới hạn bản đồ theo một khoảng thời gian, ví dụ một ca làm việc
• Filters đặt giá trị tối thiểu và tối đa cho bất kỳ giá trị nào
• Color by, Shape và Size chọn những gì hiển thị trong hình thức của mỗi chấm
• Fit to view (Shift+F) thu phóng về toàn bộ bản đồ. Kéo để di chuyển và cuộn để thu phóng

Các hình ảnh phía sau các chấm bạn chọn sẽ xuất hiện dưới dạng hình thu nhỏ bên cạnh bản đồ. Sắp xếp chúng bằng Sort by, và mở bất kỳ hình nào bằng Open in Library hoặc Open in Teach.

Thêm hình ảnh vào training set

1. Chọn các chấm bạn muốn, ví dụ mọi Class disagreement trong ca làm việc gần nhất. Nhấp vào một chấm, Shift+click để thêm, hoặc giữ Shift và kéo để vẽ quanh một nhóm. Select all trong các hình thu nhỏ sẽ chọn mọi hình ảnh được hiển thị.
2. Nhấp Add n to dataset.
3. Đối với AI Classification, chọn Class to assign. Đối với AI Segmentation, bạn có thể Pre-fill with the predicted mask và sửa nó trong khi gán nhãn.
4. Xác nhận. Các hình ảnh được sao chép vào dataset của tool.
5. Huấn luyện lại:
   • AI Classification: nhấp Open Teach và huấn luyện lại. Việc huấn luyện lại cần Setup: trong Production, nút sẽ ghi Switch to Setup to retrain.
   • AI Segmentation: nhấp Open Label step, bao gồm các region mới, sau đó huấn luyện.

Thêm hình ảnh cũng hoạt động trong Production, vì vậy bạn có thể thu thập chúng trong khi dây chuyền đang chạy và huấn luyện lại sau.

Gán nhãn từ hình ảnh, không phải từ bộ phận

Gán cho mỗi hình ảnh lớp mà bạn có thể nhìn thấy trong hình ảnh camera. Nếu một lỗi không hiển thị trong hình ảnh, mô hình không thể học nó, và gán nhãn nó là lỗi chỉ dạy cho mô hình nhiễu.

Những điều nên biết

• Haystack cần một tool AI Classification hoặc AI Segmentation đã được huấn luyện. Các loại tool khác sẽ ghi This tool type does not have a haystack yet.
• Nó cần quyền chỉnh sửa recipe. Xem Users and Permissions
• Các phím tắt được liệt kê trong Help > Keyboard shortcuts > Haystack

Tiếp theo nên đi đâu

• Library: mọi lần chụp, có bộ lọc
• Inspection tools: AI Classification và AI Segmentation