Trong suốt trong thời gian qua, SQL Server Integration Services – SSIS đã tạo dựng được tên tuổi là một dụng cụ ETL ổn định, mạnh mẽ và nhanh chóng với sự tương trợ đa nguồn. Nội dung bài viết này sẽ san sớt tổng quan về SSIS và những điều cần hiểu rõ cho những người dân mới khai mạc.

Bạn Đang Xem: SQL Server Integration Services (SSIS) và những điều cần biết

Lịch sử vẻ vang và quá trình hình thành SSIS

SSIS là viết tắt của SQL Server Integration Services – một dụng cụ tích hợp và quản lý tài liệu đi kèm với cơ sở tài liệu Microsoft SQL Server.

SSIS giúp lưu trữ tài liệu linh hoạt và nhanh chóng hơn với những tính năng như một dụng cụ ETL (trích xuất lượng lớn tài liệu từ nhiều nguồn tài liệu trong các định dạng khác nhau, chỉnh sửa và làm sạch tài liệu sau đó tải chúng vào kho tài liệu đã được thiết kế).

Các tổ chức hiện nay sử dụng SSIS với mục tiêu lưu trữ tài liệu, trích xuất và tải tài liệu, quản lý tài liệu, làm sạch, thống nhất tài liệu, v.v.

Trước lúc có SSIS, việc vận chuyển tài liệu giữa các nơi lưu trữ thường rất khó bởi vì cấu trúc của khá nhiều tài liệu khác nhau và chúng cần phải được thay đổi trước lúc vận chuyển đến nơi lưu trữ mới.

Tuy nhiên với SSIS, nó có thể trích xuất tài liệu từ nhiều nguồn khác nhau như cơ sở tài liệu SQL Server, tệp Excel, cơ sở tài liệu Oracle và DB2,… để lấy đến đích một cách dễ dàng.

Ngoài ra, SSIS cũng gồm có các dụng cụ đồ họa và trình hướng dẫn để thực hiện các chức năng của quy trình công việc như gửi thư email, hoạt động truyền tải tập tin, trích xuất nguồn tài liệu và truyền tải tài liệu đến đích.

>> Xem thêm hướng dẫn xây dựng kho tài liệu

Tất cả chúng ta hãy cùng tìm hiểu lịch sử dân tộc và quá trình hình thành của SSIS tại chỗ này:

• Trước tiên, từ thời điểm năm 1989 đến năm 2000, các phiên bản SQL tuần tự là SQL Server 7 và 2000 ra đời đi kèm với Thương Mại & Dịch Vụ chuyển đổi tài liệu – DST (Data Transformation Services). DST có thể được cho là một phiên bản lỗi thời của SSIS.
• Đến năm 2005, các nhóm phát triển của Microsoft đã quyết định thay thế DST bằng SSIS thay vì chỉ nâng cấp và sửa đổi nó. Đây có thể được xem là một sự cải tiến mạnh mẽ và cái tên SQL Server Integration Services chính thức ra đời.
• Sau đó đến với SQL Server 2008, nhiều cải tiến hiệu suất đã được thực hiện cho SSIS và các nguồn mới cũng được ra mắt.
• Tiếp tục là phiên bản SQL Server 2012, đây là bản phát hành lớn số 1 và thay mặt đại diện cho SSIS. SSIS 2012 giúp cấu hình các gói dễ dàng hơn và nó đi kèm với nhiều tiện ích quản lý và lưu trữ tập trung vào các danh mục. Tất cả chúng ta sẽ đi sâu hơn vào các chủ đề đó ở phần sau trong bài san sớt này.

• SQL Server 2014 là một phiên bản không có nhiều sự thay đổi lớn so với bản cũ tuy nhiên một số nguồn mới đã được thêm vào. Tất cả chúng ta có thể sử dụng chúng bằng phương pháp tải xuống riêng biệt qua kênh CodePlex (một website mã nguồn mở) hoặc thông qua Gói tính năng SQL Server.

Một trong những ví dụ cho nó là gói tính năng Azure (để kết nối với những nguồn và đối tượng người tiêu dùng đám mây) và bộ phân phối tài liệu cân bằng (để chia luồng tài liệu của bạn thành nhiều đường ống).

• Trong SQL Server 2016, ở phiên bản này chúng ta cũng có thể triển khai toàn bộ dự án thay vì các gói riêng lẻ. Không những thế, có những nguồn bổ sung – nhất là các nguồn tài liệu lớn và đám mây – và phần danh mục cũng tồn tại một số sự thay đổi.

Vì sao SSIS lại quan trọng

Một trong những tính năng vượt trội nhất của SSIS là khả năng trích xuất và đồng bộ tài liệu nhanh chóng và linh hoạt. SSIS cung cấp một nền tảng thuận tiện để vận chuyển tài liệu một cách dễ dàng từ nguồn này sang nguồn khác.

Xem Thêm : Postcode là gì? Cách xác định và bảng mã bưu chính ở Việt Nam 2021

SSIS khiến cho bạn trích xuất tài liệu từ nhiều nguồn khác nhau như cơ sở tài liệu SQL, cơ sở tài liệu Qracle, cơ sở tài liệu DB2 và các tệp Micrisoft Excel lên kho tài liệu sau đó sắp xếp và đồng bộ chúng. Nó có thể tải hàng triệu tệp tài liệu từ nguồn này sang nguồn khác chỉ trong vài phút

Ngoài ra một trong những lý do vì sao SSIS được sử dụng rộng rãi là vì tính linh hoạt của nó. SSIS tương trợ nhiều loại cơ sở tài liệu và đồ họa giao diện người dùng (GUI) đơn giản giúp người dùng mới hoàn thành các tác vụ chuyển đổi và lưu trữ tài liệu vô cùng dễ dàng. Người thể tự thiết kế một quy trình ETL (Trích xuất – chuyển đổi – tải) như ý muốn.

Các thành phần chính SSIS

Có một số thành phần cốt lõi tạo nên SSIS GUI (Đồ họa giao diện người dùng) trong cấu trúc SSIS:

• Control Flow (Luồng điều khiển và tinh chỉnh) – Luồng điều khiển và tinh chỉnh là các phần của một gói gồm có cấu trúc, nhiệm vụ và mức độ ưu tiên.
• Data Flow (Luồng tài liệu) – Trong SSIS tất cả chúng ta có thể trích xuất và chuyển đổi tài liệu từ nhiều nguồn khác nhau trên thiết bị. Các thành phần của một luồng tài liệu gồm có nguồn, chuyển đổi và đích.
• Sự kiện Handlers (Xử lý sự kiện) – Tạo nhiệm vụ sự kiện tại những thời khắc như nhắn tin nhắn, email.
• Package Explorer – Cung cấp 1 giao diện người dùng đồng bộ cho tất cả những gói.

Control Flow – Luồng điều khiển và tinh chỉnh

Control Flow là nơi bạn kiểm soát việc thực thi các nhiệm vụ bên trong một gói và sắp xếp trật tự thực hiện các nhiệm vụ đó. Trong SSIS, luồng điều khiển và tinh chỉnh là một phần của một gói và được cho phép người dùng thực thi các nhiệm vụ khác nhau.

Các loại nhiệm vụ mà chúng ta cũng có thể thực thi gồm có nhiệm vụ SQL, nhiệm vụ luồng tài liệu, nhiệm vụ gói, nhiệm vụ tập lệnh, nhiệm vụ gửi thư, v.v. Luồng điều khiển và tinh chỉnh cũng gồm có các ràng buộc về mức độ ưu tiên trật tự hoàn thành các nhiệm vụ.

Data Flow – Luồng tài liệu

Ở đây ta hiểu luồng tài liệu nơi ta đổ tài liệu từ các cổng tài liệu tới đích trong quá trình ETL tức là bạn lấy tài liệu từ một nguồn, chuyển đổi nó và đặt nó vào trong 1 đích khác.

Có ba thành phần tạo nên luồng tài liệu:

• Nguồn – Trích xuất tài liệu từ các nguồn gồm có tệp, cơ sở tài liệu và các vị trí khác.
• Chuyển đổi – Xử lý tài liệu sau khoản thời gian nó đã được trích xuất từ ​​nguồn.
• Đích đến – Ghi tài liệu vào đích cuối cùng của nó.

Khi đối chiếu với Luồng tài liệu, bạn hoàn toàn có thể chọn các phép chuyển đổi tài liệu mà bạn muốn để thực hiện một chu trình ETL đưa tài liệu về đích đến cuối cùng của nó theo ý bạn.

Các tác vụ chính có trong Luồng tài liệu gồm có làm sạch tài liệu, thống nhất, sắp xếp, phối hợp và phân phối tài liệu. Những tác vụ này giúp chúng ta cũng có thể sử dụng tài liệu một cách dễ dàng và thuận tiện.

Sự kiện Handlers – Trình xử lý sự kiện

Các trình xử lý sự kiện cũng tương tự như các gói chúng cũng có những tác vụ và vùng chứa. Bạn cũng có thể tạo 1 trình xử lý sự kiện tùy chỉnh trong tab Sự kiện Handlers và sau đó thêm chúng vào trong 1 gói.

Các tệp thực thi tạo ra các sự kiện tại thời khắc chạy và chúng ta cũng có thể sử dụng trình xử lý sự kiện để thực hiện các nhiệm vụ theo thông tin. Các nhiệm vụ của trình xử lý sự kiện gồm có quét dọn kho lưu trữ tài liệu tạm thời, truy xuất thông tin khối hệ thống, làm mới tài liệu trong bảng và gửi email để thông tin cho bạn khi có lỗi hoặc khi tác vụ không thành công.

Package Explorer – Khám phá gói

Trong Package Explorer, chúng ta cũng có thể xem tất cả những tính năng của một gói gồm có trình quản lý kết nối, trình cung cấp lượt truy cập, tệp thực thi, ràng buộc ưu tiên, thông số, trình xử lý sự kiện, biến, nhiệm vụ và vùng chứa. Package Explorer sẽ được cho phép bạn kiểm tra cấu trúc của một gói gồm có những gì từ đó chúng ta cũng có thể dễ dàng lựa chọn, thay đổi, sắp xếp các nhiệm vụ gói.

SSIS Packages

Xem Thêm : Giao tử là gì? Khả năng phát sinh giao tử sinh sản ở hai giới

Một trong những nhiệm vụ cơ bản các bạn sẽ phải học khi sử dụng SSIS là cách tạo một gói. Gói là tập hợp các kết nối, luồng điều khiển và tinh chỉnh, luồng tài liệu, trình xử lý sự kiện, thông số và cấu hình mà bạn sử dụng để xử lý tài liệu. Nội dung của một gói có thể được chia thành ba thành phần:

• Luồng điều khiển và tinh chỉnh (Nhiệm vụ và vùng chứa) – Luồng điều khiển và tinh chỉnh gồm có các nhiệm vụ và vùng chứa thực thi khi gói được chạy.
• Luồng tài liệu (Nguồn và đích tài liệu) – Luồng tài liệu xác định cách tài liệu được xử lý và chuyển đổi từ nguồn sang đích.
• Trình quản lý kết nối – Liên kết giữa gói và nguồn tài liệu xác định chuỗi kết nối mà các thành phần khác của gói sử dụng để tương tác với tài liệu nguồn.

Nhiệm vụ của SSIS

Trong SSIS, chúng ta cũng có thể thêm các tác vụ vào luồng điều khiển và tinh chỉnh. Có một loạt các tác vụ khác nhau mà chúng ta cũng có thể lựa chọn đưa vào cấu hình của gói. Trong số đó một số nhiệm vụ chính chúng ta cũng có thể sử dụng là:

• Thực thi tác vụ SQL – Được chấp nhận bạn chạy một hoặc nhiều câu lệnh SQL từ một gói.
• Nhiệm vụ luồng tài liệu – Trích xuất, chuyển đổi và tải tài liệu từ một nguồn duy nhất hoặc nhiều nguồn. Làm sạch và sửa đổi tài liệu khi chuyển tiếp.
• Nhiệm vụ xử lý dịch vụ phân tích– Các đối tượng người tiêu dùng của Thương Mại & Dịch Vụ phân tích xử lý (mô hình bảng, hình khối, kích thước, v.v.). Xử lý một hoặc nhiều đối tượng người tiêu dùng cùng một lúc.
• Thực hiện nhiệm vụ gói – Được chấp nhận một gói chạy một gói khác ví như một phần của quy trình thao tác. Thường được sử dụng để chia nhỏ các quy trình công việc phức tạp thành nhiều gói.
• Thực hiện nhiệm vụ quy trình – Được sử dụng để chạy một ứng dụng hoặc tệp hàng loạt như một phần của gói SSIS.
• Nhiệm vụ FTP – File Transfer Protocol (Giao thức truyền tải tập tin) – Tải xuống và tải lên các tệp tài liệu bằng FTP. Song song được cho phép người dùng sao chép tệp vào thư mục tiêu.
• Nhiệm vụ tập lệnh – Nhập mã để thực hiện một tác vụ không có trong SSIS. Có thể phối hợp nhiều nhiệm vụ trong một tập lệnh.
• Nhiệm vụ gửi thư – Gửi email cho những người dùng nếu một quy trình gói thành công, không thành công hoặc một sự kiện (ví dụ: nếu một bản sao lưu cơ sở tài liệu không thành công) diễn ra.
• Nhiệm vụ XML – Extensible Markup Language (Truyền tài liệu và mô tả những loại tài liệu khác nhau) – Truy cập, thống nhất, xác thực và sửa đổi các tệp XML. Có thể được sử dụng để thống nhất nhiều nguồn tài liệu XML thành một tài liệu.

Lợi ích và không ổn của SSIS

Giống như bất kỳ dụng cụ nào khác, SSIS có những ưu điểm và nhược điểm riêng như một dụng cụ ETL.Tuy nhiên, điều này sẽ phụ thuộc phần nhiều vào cách bạn muốn sử dụng dụng cụ này ra làm sao trong tổ chức của mình.

Lợi ích SSIS

• Linh hoạt

SSIS mang một tính linh hoạt cao giống như một dụng cụ ETL hay một dụng cụ chuyển đổi tài liệu. Người dùng có thể nhập tài liệu từ các nguồn tài liệu không đồng nhất và sau đó chuyển đổi tài liệu Theo phong cách họ thấy phù hợp. Các tùy chọn cấu hình như luồng điều khiển và tinh chỉnh và luồng tài liệu được cho phép người dùng kiểm soát toàn bộ quy trình đó.

• Dễ sử dụng

Việc kết nối giao diện người dùng với cấu hình SSIS vô cùng đơn giản. Mọi thứ bạn cần phải đều dễ dàng tìm thấy và chúng ta cũng có thể nhấp vào các tab luồng điều khiển và tinh chỉnh và luồng tài liệu mà không cần tìm kiếm lâu. Nếu khách hàng không làm rõ về cấu trúc, chúng ta cũng có thể kiểm tra thông qua Package Explorer.

• Tạo tài liệu

SSIS cung cấp một số tính năng được cho phép bạn tạo tài liệu mới khi chúng ta chuyển đổi tài liệu lúc đầu. Bạn cũng có thể thêm các gói có chú thích, luồng điều khiển và tinh chỉnh và luồng tài liệu. Trình viết mô tả cho những thành phần trong một cấu hình SSIS được cho phép bạn ghi lại những thao tác mà bạn thực hiện.

Những không ổn đáng nói khi sử dụng SSIS

• Hạn chế trong tương trợ hệ điều hành

Một trong những hạn chế lớn số 1 của SSIS là nó chỉ tương trợ Microsoft Windows. Ngay cả những lúc đã tích hợp thêm nhiều mã nguồn thì việc không tương trợ các hệ điều hành khác cũng gây nên sự hạn chế khi muốn trích xuất và tích hợp tài liệu từ nhiều nguồn khác nhau không phải của Windows.

Tuy nhiên nếu như khách hàng chủ yếu thao tác trên nền tảng Microsoft Windows thì nhược điểm này sẽ ít đáng kể hơn.

• Thiếu các tùy chọn tích hợp

Việc chỉ tương trợ hệ điều hành Windows gây khó khăn trong việc tích hợp SSIS với những dụng cụ thuộc các hệ điều hành khác. Mặc dù SSIS đã cung cấp phần mở rộng tùy chọn được cho phép bạn khắc phục phần nào sự phiền toái này nhưng nó rất khó có thể có thể so với tính linh hoạt của khá nhiều dụng cụ mã nguồn mở sẵn như Python.

SSIS không phải là một dịch vụ phù phù hợp với mọi hệ điều hành, đặc biệt quan trọng nếu như khách hàng không muốn bị giới hạn trong các dịch vụ của Windows.

Khi nào tất cả chúng ta cần dùng SSIS

Nếu khách hàng đang tìm cách đưa tài liệu từ các nguồn đến một đích thông qua quy trình ETL thì SSIS là thứ sẽ phải có. Trích xuất tài liệu từ các nguồn sau đó chuyển đổi tài liệu đưa chúng tập chung vào 1 đích diễn đạt theo ý riêng là khả năng vượt trội của SSIS. Phần mềm này phù hợp cho những tổ chức bất kể họ muốn tích hợp một hay nhiều nguồn tài liệu.

Mặc dù việc sử dụng SQL Server Integration Services (SSIS) để tạo ra các tác vụ làm sạch và xử lý tài liệu lúc đầu có những khó khăn nhưng lợi ích của việc vận dụng dụng cụ này vào quy trình ETL cũng là rất lớn. Dành thời kì để tìm hiểu về phong thái ứng dụng SSIS sẽ khiến cho bạn chuẩn bị sẵn sàng được những bộ tài liệu nhanh chóng khi bạn cần phải. Bạn cũng có thể xem qua khóa học data analysis cùng Cole với 3 Lever Intern, Executive và Specialist.