Infra07.09.2026 · 01:10
Dataflow Model được xem lại
Từ vldb.org
Mười một năm trước, bài báo cứu Dataflow Model đã khẳng định rằng dữ liệu không giới hạn và không theo thứ tự là xu hướng mới, và rằng chúng ta phải ngừng chờ đợi dữ liệu hoàn thiện. Nó đề xuất một mô hình thống nhất (windowing, triggers, watermarks, retractions) để trao đổi tự do giữa độ chính xác, độ trễ và chi phí trên cả động cơ batch và streaming. Nhân dịp nhận giải VLDB Test of Time, chúng tự đánh giá công việc của mình - một bài báo về phân tích streaming, thật sự nếu không phải về tên gọi - về những gì đã lão hóa tốt, lão hóa kém và những gì chúng đã bỏ sót. Chúng tìm thấy nền tảng cốt lõi của bài báo vẫn phần lớn đúng đắn: sự ưu tiên của thời gian sự kiện, sự vô nghĩa của việc chờ đợi sự hoàn thiện, và sự quyết liệm về tính nhất quán mạnh mẽ đã lão hóa tốt. Nhưng chúng đã sai một số phần quan trọng của giao diện phân tích: (1) chúng để windowing và triggering, có ngữ nghĩa ràng buộc với các vấn đề vận hành, chi phối bài trình bày vượt quá mức cần thiết, (2) triggers là câu trả lời quá phức tạp cho một câu hỏi người dùng không bao giờ nên đối mặt, và (3) quan điểm dựa trên stream đã bỏ sót một sự thật sâu hơn: streams và tables là hai cách biểu diễn của cùng một đối tượng với ngữ nghĩa truy cập khác nhau. Những cơ chế thực hiện mục tiêu phân tích của bài báo cuối cùng đã phát triển ra khỏi cuốn sách lối chơi cơ sở dữ liệu: SQL, bảo trì view tăng dần, và views được vật chất hóa với hợp đồng độ tươi mới rõ ràng. Chúng tập trung quá nhiều vào cơ chế của streaming thay vì hoàn thành những gì cộng đồng cơ sở dữ liệu đã bắt đầu nhưng chưa hoàn thành: làm cho độ phức tạp của streaming phân tích gần như biến mất hoàn toàn. Tuy nhiên, kết luận vẫn chưa hoàn toàn là lời thú nhận.
Nguồn
+ 1 nguồn khác
- THẢO LUẬNscott_snews.ycombinator.com
Lịch sử nội dung (2)
- 2026-10-16 · Tóm tắt · vi · Thay nội dung đã lưuMười một năm trước, bài báo cứu Dataflow Model đã khẳng định rằng dữ liệu không giới hạn …
- 2026-10-16 · Tiêu đề · vi · Thay nội dung đã lưuNhìn lại mô hình DataflowDataflow Model được xem lại
Bản tin mỗi sáng
Tin quan trọng nhất trong ngày. Miễn phí, hủy bất cứ lúc nào.
Telegram @aihomnay