Tôi làm cách nào để tổng hợp dữ liệu theo ngày và múi giờ vẫn tuân theo?

Question

Chúng tôi hiện đang sử dụng bảng tóm tắt tổng hợp thông tin cho người dùng của chúng tôi theo giờ theo giờ UTC. Vấn đề chúng tôi đang gặp phải là bảng này đang trở nên quá lớn và làm chậm hệ thống của chúng tôi xuống vô cùng. Chúng tôi đã thực hiện tất cả các kỹ thuật điều chỉnh được khuyến nghị cho PostgreSQL và chúng tôi vẫn gặp phải sự chậm chạp.

Ý tưởng của chúng tôi là bắt đầu tổng hợp theo ngày thay vì theo giờ, nhưng vấn đề là chúng tôi cho phép khách hàng thay đổi múi giờ, tính toán lại dữ liệu cho ngày đó.

Có ai biết cách lưu trữ bản tóm tắt hàng ngày nhưng vẫn tôn trọng số và tổng số khi họ chuyển múi giờ?

Answer 1

Tóm tắt dữ liệu trong các bảng có cột thời gian chờ và trường "ngày" (ngày) là ngày cho dòng tóm tắt cụ thể đó. Chỉ mục trên (timeoffset, ngày, các lĩnh vực có liên quan khác), clustered nếu có thể (có lẽ PostgresSQL đã clustered chỉ mục?) Và tất cả nên được tốt.

Answer 2

Tôi giả sử bạn đã trải qua tất cả các cân nhắc phân vùng, chẳng hạn như phân vùng theo người dùng.

Tôi có thể thấy một số giải pháp cho vấn đề của bạn, tùy thuộc vào mẫu sử dụng.

1. Tổng hợp dữ liệu mỗi ngày, mỗi người dùng lựa chọn. Trong trường hợp thay đổi múi giờ, lập trình tính toán lại tổng hợp cho đối tác này. Điều này là hợp lý nếu thay đổi múi giờ là không thường xuyên và nếu một sự chậm trễ nhất định trong dữ liệu có thể được giới thiệu khi người dùng thay đổi múi giờ.

2. Nếu bạn có các biện pháp tương đối ít, bạn có thể duy trì 24 cột cho mỗi phép đo - mỗi cột mô tả tổng hợp hàng ngày cho phép đo theo múi giờ khác.

3. Nếu thay đổi múi giờ thường xuyên và có nhiều biện pháp, có vẻ như 24 bảng tổng hợp khác nhau sẽ là cách để đi.

Answer 3

Tôi cũng gặp sự cố này. Tôi lấy giải pháp này: dữ liệu với loại ngày sử dụng múi giờ địa phương, dữ liệu khác với loại ngày giờ sử dụng múi giờ UTC, vì chỉ mục thống kê là cục bộ. Một lý do khác là bây giờ chúng tôi chỉ có dữ liệu cục bộ.