Data Pipeline

Create Routing

Hướng dẫn tạo Routing để kết nối Source, Transformation và Destination trong Data Pipeline.

Tổng quan

Routing xác định luồng di chuyển của dữ liệu trong Data Pipeline, từ các Source qua bước Transformation rồi đến các Destination. Một Routing có thể tiếp nhận dữ liệu từ nhiều Source, áp dụng một hoặc nhiều Transformation hoặc giữ nguyên dữ liệu bằng chế độ Passthrough, sau đó chuyển kết quả đến các Destination đã chọn.

Điều kiện trước khi tạo

Đảm bảo các thành phần cần sử dụng đã được tạo trên hệ thống:

  • Ít nhất một Source Connector để cung cấp dữ liệu đầu vào.
  • Transformation phù hợp nếu dữ liệu cần được xử lý hoặc chuẩn hóa.
  • Ít nhất một Destination Connector để tiếp nhận dữ liệu đầu ra.

Nếu không cần xử lý dữ liệu, bạn có thể chọn Passthrough thay cho Transformation.

Các bước cấu hình

Bước 1: Truy cập danh sách Routing

  1. Từ menu chính, chọn Data Pipelines → Routings.
  2. Hệ thống hiển thị danh sách các Routing đã được tạo.
  3. Nhấn Create Routing để mở biểu mẫu tạo mới.

Bước 2: Nhập thông tin cơ bản

Trong phần Basic Information, điền các thông tin sau:

TrườngBắt buộcMô tả
NameCóTên dùng để định danh Routing. Tên không được trùng với Routing đã tồn tại trên hệ thống.
DescriptionKhôngMô tả mục đích hoặc luồng dữ liệu được xử lý bởi Routing.

Bước 3: Cấu hình Routing Flow

3.1. Chọn Sources

  1. Nhấn Add Source.
  2. Hệ thống hiển thị danh sách các Source Connector đã được tạo.
  3. Chọn một hoặc nhiều Source cần đưa vào Data Pipeline.
  4. Nhấn Select để xác nhận.

3.2. Chọn phương Transformations

Tại khối Transformation, chọn một trong hai phương thức:

Phương thứcMô tả
PassthroughGiữ nguyên dữ liệu nhận được từ Source và chuyển trực tiếp đến Destination mà không áp dụng Transformation.
TransformationÁp dụng các Transformation đã tạo để phân tích, chuyển đổi hoặc chuẩn hóa dữ liệu. Có thể chọn nhiều Transformation theo nhu cầu xử lý.
Khi chọn Transformation, chọn Transformation cần sử dụng từ danh sách hiển thị trên hệ thống.

3.3. Chọn Destinations

  1. Nhấn Add Destination.
  2. Hệ thống hiển thị danh sách các Destination Connector đã được tạo.
  3. Chọn một hoặc nhiều Destination sẽ tiếp nhận dữ liệu đầu ra.
  4. Nhấn Select để xác nhận.

Bước 4: Kết nối các thành phần

Trên giao diện Routing Flow, nối các khối theo thứ tự sau:

Source → Transformation hoặc Passthrough → Destination

Kiểm tra để bảo đảm mỗi luồng đều có Source đầu vào, phương thức xử lý và Destination đầu ra. Khi sử dụng nhiều Source, Transformation hoặc Destination, nối các khối theo đúng luồng dữ liệu mong muốn.

Bước 5: Tạo Routing

  1. Kiểm tra lại thông tin và các kết nối trong Routing Flow.
  2. Nhấn Create để hoàn tất.
  3. Xác nhận Routing mới xuất hiện trong danh sách Routing.

Sau khi Routing được tạo, dữ liệu từ các Source đã chọn sẽ được xử lý theo luồng cấu hình và chuyển đến Destination tương ứng.

logo
CMC Telecom
Aspire to Inspire the Digital World