Data Pipeline
Hướng dẫn sử dụng Data Pipeline
Giới thiệu
Data Pipeline (luồng truyền dữ liệu/Data Pipeline) là tập hợp các tác vụ được phối hợp bởi nhiều hệ thống khác nhau nhằm mục đích thu thập dữ liệu từ hệ thống của khách hàng, truyền đến Cổng Data Suite, trải qua thao tác sàng lọc, các hàm xử lý tính toán để làm sạch dữ liệu thô. Dữ liệu sạch sau đó được lưu vào Data Warehouse và sẵn sàng để biểu diễn lên giao diện báo cáo.
Data Pipeline có vai trò quan trọng trong việc cung cấp dữ liệu cho các Schema trong Data Model. Nếu chỉ thiết kế báo cáo mà không có Data Pipeline thường xuyên đẩy dữ liệu mới về, mẫu báo cáo sẽ nhanh chóng bị "cũ" vì không được cập nhật.
Hệ thống Data Suite hiện tại hỗ trợ cơ chế quản lý Data Pipeline dưới hình thức đi kèm với Mẫu Báo Cáo (Report Template). Mỗi mẫu báo cáo do Data Suite cung cấp sẽ đi kèm với pipeline được thiết kế riêng cho template đó, đáp ứng việc thu thập dữ liệu từ một nguồn cụ thể tuỳ theo chủ đề của template.
Ví dụ: Khi bạn sử dụng mẫu Báo Cáo Tài Chính sử dụng dữ liệu nguồn dữ liệu là phần mềm kế toán Fast Accounting, bạn có thể chủ động cấu hình data pipeline để truyền dữ liệu thực tế từ hệ thống của bạn sang Data Suite, từ đó biểu diễn được dữ liệu thật của doanh nghiệp lên báo cáo đã được thiết kế sẵn, và luôn cập nhật dữ liệu mới.
Các bước sử dụng
Tạo báo cáo theo mẫu dữ liệu
Truy cập Danh mục Mẫu báo cáo
Chọn mẫu báo cáo mong muốn. Ví dụ: FAST Accounting - Financial report
Điền một số thông tin, chọn "Dùng dữ liệu thật của bạn" sau đó xác nhận tạo báo cáo.
Mặc định "Cách cung cấp dữ liệu" là "Kết nối cơ sở dữ liệu gốc". Nếu bạn mong muốn dùng file Excel để thử trước, hãy đổi thành "Tải file Excel/CSV theo mẫu".
Hệ thống sẽ chuyển đến màn hình cấu hình Data Pipeline.
Cấu hình Data Pipeline
Giao diện chi tiết Data Pipeline gồm:
Sơ đồ luồng truyền tải dữ liệu từ hệ thống của bạn đến báo cáo ở Data Suite.
Danh sách bảng dữ liệu thô (raw tables) đã được thiết lập và chờ dữ liệu thật đổ về
Hướng dẫn cài đặt Agent có chức năng thu thập dữ liệu từ hệ thống của bạn và gửi về Cổng Data Suite.
Để tiếp tục, bạn hãy thực hiện theo các bước có trong phần Hướng dẫn cài đặt trên màn hình.
Sau khi đã thực hiện đủ các bước theo hướng dẫn và quan sát được dữ liệu đã được đổ về table raw, bạn có thể tiếp tục nhấn "Tạo báo cáo & Kích hoạt Pipeline" để tiếp tục tạo và xem báo cáo với dữ liệu thật được cập nhật liên tục từ hệ thống của bạn.
Last updated