Dữ liệu vận hành chỉ có giá trị khi người dùng tin nó. Khi báo cáo tháng có những ngày trống, khi số liệu cảm biến lệch xa kết quả phòng thí nghiệm, khi hai bảng tính cho hai con số khác nhau về cùng một chỉ tiêu — người ta quay lại ghi sổ tay và ra quyết định theo cảm tính.
Bài này định nghĩa bốn tiêu chí chất lượng dữ liệu, cách đo từng tiêu chí và cách giữ chúng ở mức chấp nhận được.
Thuộc chuyên đề: Dùng AI trong vận hành trạm xử lý nước
Tiêu chí 1: Đầy đủ
Câu hỏi: dữ liệu có mặt trong bao nhiêu phần trăm thời gian cần có?
| Cách đo | Công thức |
|---|---|
| Độ đầy đủ | Số điểm dữ liệu thực có ÷ Số điểm dữ liệu kỳ vọng × 100% |
Ví dụ: tín hiệu ghi mỗi phút, một ngày kỳ vọng 1.440 điểm. Có 1.296 điểm → đầy đủ 90%.
Nguyên nhân mất dữ liệu thường gặp:
- Mất kết nối mạng giữa trạm và máy chủ
- Mất điện bộ thu thập dữ liệu
- Cảm biến tháo ra bảo trì không ghi chú
- Lỗi phần mềm, đầy bộ nhớ
Giải pháp:
- Bộ thu thập có bộ nhớ đệm — lưu tại chỗ khi mất mạng, gửi bù khi có lại
- Nguồn dự phòng cho bộ thu thập và thiết bị mạng
- Cảnh báo khi một tín hiệu im lặng quá thời gian cho phép
Tiêu chí 2: Chính xác
Câu hỏi: con số có phản ánh đúng thực tế không?
Đây là tiêu chí khó đo nhất, vì không có "giá trị thật" để so liên tục. Cách tiếp cận thực tế là phát hiện dấu hiệu sai:
| Dấu hiệu | Cách phát hiện tự động |
|---|---|
| Đứng yên | Giá trị không đổi quá một khoảng thời gian bất thường |
| Ngoài dải vật lý | DO âm, pH ngoài 0–14, mức nước vượt chiều cao bể |
| Nhảy giật | Thay đổi giữa hai điểm liên tiếp lớn bất thường |
| Trôi | Chênh lệch với đo đối chứng tăng dần theo thời gian |
| Mâu thuẫn chéo | Bơm báo đang chạy nhưng lưu lượng bằng 0; máy thổi khí dừng mà DO vẫn tăng |
| Lệch phòng thí nghiệm | So cảm biến online với kết quả phân tích cùng thời điểm |
Kiểm tra mâu thuẫn chéo rất mạnh vì tận dụng quan hệ vật lý giữa các tín hiệu — phát hiện lỗi mà kiểm tra từng tín hiệu riêng lẻ không thấy.
Tiêu chí 3: Đúng thời điểm
Câu hỏi: dữ liệu có gắn đúng thời gian và đến kịp lúc cần không?
| Vấn đề | Hậu quả |
|---|---|
| Đồng hồ thiết bị lệch nhau | Phân tích nguyên nhân sai thứ tự sự kiện |
| Kết quả phòng thí nghiệm ghi theo ngày trả kết quả | Gắn sai với điều kiện vận hành |
| Dữ liệu đến trễ nhiều giờ | Cảnh báo vô dụng — sự cố đã xảy ra |
| Lệch múi giờ giữa hệ thống | Lệch đều vài giờ, khó phát hiện |
Giải pháp:
- Đồng bộ thời gian tự động cho mọi thiết bị
- Ghi thời điểm lấy mẫu cho kết quả phòng thí nghiệm
- Theo dõi độ trễ từ lúc đo đến lúc dữ liệu có trên hệ thống
Tiêu chí 4: Nhất quán
Câu hỏi: cùng một thứ có được gọi, đo và ghi theo cùng một cách không?
| Vấn đề | Ví dụ |
|---|---|
| Tên tín hiệu không thống nhất | "DO_BE1", "DO bể hiếu khí 1", "AI_03" cho cùng một cảm biến |
| Đơn vị không thống nhất | Lưu lượng m³/h ở chỗ này, L/s ở chỗ khác |
| Định nghĩa không thống nhất | "Lưu lượng ngày" tính từ 0 giờ hay từ 7 giờ sáng |
| Nhiều nguồn cho cùng chỉ tiêu | Sổ tay, bảng tính, hệ thống — ba con số khác nhau |
Giải pháp:
- Danh mục tín hiệu chuẩn: tên, đơn vị, vị trí, dải đo, mô tả
- Một nguồn sự thật duy nhất cho mỗi chỉ tiêu
- Quy tắc đặt tên thống nhất và áp dụng cho mọi tín hiệu mới
Bảng điểm chất lượng dữ liệu
Theo dõi chất lượng dữ liệu như theo dõi chất lượng nước:
| Tín hiệu | Đầy đủ (7 ngày) | Đứng yên | Ngoài dải | Lệch đối chứng gần nhất | Trạng thái |
|---|---|---|---|---|---|
| DO bể hiếu khí | 99% | Không | Không | Nhỏ | Tốt |
| pH đầu vào | 97% | Không | Không | Tăng dần | Cần hiệu chuẩn |
| Lưu lượng | 85% | Có, 6 giờ | Không | — | Kiểm tra kết nối |
| Mức bể điều hòa | 99% | Không | Có, 3 lần | — | Kiểm tra cảm biến |
Mỗi tuần xem một lần là đủ để phát hiện vấn đề trước khi nó làm sai báo cáo tháng.
Ai chịu trách nhiệm
Chất lượng dữ liệu không tự nhiên tốt lên. Cần phân công rõ:
| Việc | Người |
|---|---|
| Vệ sinh, hiệu chuẩn cảm biến | Vận hành |
| Ghi nhật ký sự kiện, bảo trì | Vận hành |
| Nhập kết quả phòng thí nghiệm đúng thời điểm | Phòng thí nghiệm |
| Theo dõi bảng điểm chất lượng | Kỹ thuật, quản lý |
| Sửa lỗi kết nối, thiết bị | Kỹ thuật |
Bài liên quan
- Dữ liệu cần có trước khi nghĩ tới AI: danh sách kiểm tra cho trạm xử lý nước thải
- Cảm biến trong trạm xử lý nước thải: lắp ở đâu, hiệu chuẩn thế nào, khi nào số liệu sai
- Năm hiểu lầm phổ biến về AI trong xử lý nước thải
Chất lượng dữ liệu được theo dõi tự động
Kiểm tra thủ công bốn tiêu chí cho hàng chục tín hiệu mỗi ngày là việc không ai làm được lâu dài. Hệ thống nên tự làm việc đó và chỉ báo khi có vấn đề.
X-IRIS giúp giữ dữ liệu đáng tin:
- Bộ nhớ đệm tại trạm — không mất dữ liệu khi mất mạng
- Tự động phát hiện đứng yên, ngoài dải, nhảy giật, mâu thuẫn chéo
- Đồng bộ thời gian mọi nguồn, ghi đúng thời điểm lấy mẫu phòng thí nghiệm
- Danh mục tín hiệu chuẩn và bảng điểm chất lượng dữ liệu theo tuần
Bước tiếp theo
Gửi phiếu khảo sát hiện trạng trạm của Quý vị →
Liên hệ: 0919 124 338 · erp.xiris@gmail.com
Xem thêm: Báo cáo và số hóa vận hành · Dự báo rủi ro bằng AI
Câu hỏi thường gặp
Độ đầy đủ bao nhiêu phần trăm là chấp nhận được? Phụ thuộc mục đích sử dụng. Với dữ liệu phục vụ tuân thủ, báo cáo và điều khiển, nên hướng tới mức rất cao và có giải trình cho mọi khoảng trống. Quan trọng hơn con số là biết vì sao dữ liệu bị thiếu.
Có nên tự động điền dữ liệu bị thiếu không? Có thể nội suy cho khoảng ngắn để phục vụ phân tích, nhưng phải đánh dấu rõ là dữ liệu nội suy. Không nên dùng dữ liệu nội suy cho mục đích tuân thủ mà không ghi chú.
Làm sao biết cảm biến sai khi không có máy đo đối chứng? Dùng kiểm tra mâu thuẫn chéo với các tín hiệu liên quan và phát hiện dấu hiệu bất thường như đứng yên, trôi một chiều. Tuy vậy, nên có máy đo cầm tay để kiểm chứng định kỳ.
Dữ liệu cũ chất lượng kém có dùng được không? Có thể dùng một phần nếu đánh dấu được đoạn nào tin được, đoạn nào không. Dữ liệu không hoàn hảo nhưng có ghi chú vẫn có giá trị hơn dữ liệu không có ngữ cảnh.