Cơ chế cập nhật dữ liệu

Tài liệu này hướng dẫn các bạn tải dữ liệu từ excel lên hệ thống PangoCDP

A/ Ingest file local vào PangoCDP

• Chọn Module CDP

• Chọn Data Ingestion

• Chọn Dataset

• Chọn Local File

• Chọn File excel muốn đẩy lên PangoCDP

Trường thông tin	Mô tả
Ignore top line	Bỏ dòng đầu, thường là header của của bảng trong excel
Parser Strategy	Cách để xử lý chuỗi đưa vào model Default: Hầu hết sẽ sử dụng option này Colon: Trường hợp có nhiều ký tự đặt biệt (VD: ! ở cuối chuỗi) trong chuỗi ký tự thì chúng ta sử dụng option này
Name	Tên của file excel
Data Model	Lựa chọn model mà lưu dữ liệu các trường thông tin tương ứng với file excel
Source Channel	Thông tin của Channel lấy từ đâu: Online Offline
Data Source	Điền thông tin dữ liệu nguồn
Sub Data Source	Điền thông tin dữ liệu nguồn phụ
Tags	Đặt tag để phân biệt và tìm kiếm dễ dàng hơn

B/ Ingest File từ cloud (google drive) vào PangoCDP

• Chọn Module CDP
• Chọn Data Ingestion

• Chọn Dataset

• File from Your Cloud

• Chọn model lưu trữ thông tin từ file excel

Trường thông tin	Mô tả
Select a file	Chọn file từ nguồn trên cloud (VD: google drive)
Remove file	Xóa file đã chọn
Datasource	Nguồn của dữ liệu
File name	Tên của file
File information	Thông tin về dung lượng và định dạng của file
Ignore top line	Bỏ dòng đầu, thường là header của bảng trong excel
Parse Strategy	Cách để xử lý chuỗi đưa vào model Default: Hầu hết sẽ sử dụng option này Colon: Trường hợp có nhiều ký tự đặt biệt (VD: ! ở cuối chuỗi) trong chuỗi ký tự thì chúng ta sử dụng option này
View sample	Xem data mẫu
Sample data	Hiển thị data mẫu

Trường thông tin	Mô tả
Data source	Nguồn của data
File name	Tên của file excel
File information	Thông tin về dung lượng, định dạng, mã ID của file excel
Name	Tên của file excel
Source Channel	Thông tin của Channel lấy từ đâu: Online Offline
Data Source	Điền thông tin dữ liệu nguồn
Sub Data Source	Điền thông tin dữ liệu nguồn phụ
Tags	Đặt tag để phân biệt và tìm kiếm dễ dàng hơn

C/ Update Strategy

Sau khi chọn các thông tin liên quan để Import dữ liệu (Excel, GG Drive) thì ngay tại bước Import sẽ có cấu trúc Update Strategy như sau:

Trường thông tin	Mô tả
Ignore If Exist	Bỏ qua nếu dữ liệu đã tồn tại	Ví dụ: Tại trường dữ liệu Phone của File Import (X) có dữ liệu được import vào Model trên PangoCDP, nếu cột Phone dữ liệu cũ trống thì sẽ được ghi đè bởi dữ liệu mới và ngược lại thì sẽ không ghi đè.
Override	Ghi đè lên dữ liệu cũ	Ví dụ: Tại trường dữ liệu Phone của File Import (X) có dữ liệu được import vào Model trên PangoCDP, dữ liệu cũ trống hoặc có dữ liệu thì dữ liệu mới đều ghi đè vào dữ liệu cũ.
Update If New Value Has Value	Chỉ ghi đè dữ liệu nếu dữ liệu mới có dữ liệu	Ví dụ: Tại trường dữ liệu Phone của File Import (X) có dữ liệu được import vào Model trên PangoCDP, dữ liệu cũ trống hoặc có dữ liệu thì dữ liệu mới đều ghi đè vào dữ liệu cũ. Ngược lại, dữ liệu mới trống thì sẽ không ghi đè vào dữ liệu cũ.
Update If Old Value No Value	Chỉ ghi đè dữ liệu nếu dữ liệu cũ bị trống	Ví dụ: Tại trường dữ liệu Phone của File Import (X) có dữ liệu được import vào Model trên PangoCDP, dữ liệu cũ trống thì dữ liệu mới đều ghi đè vào dữ liệu cũ. Ngược lại, dữ liệu cũ có dữ liệu thì sẽ không ghi đè vào dữ liệu cũ.