Openflow Connector for SQL Server 설정¶

전제 조건¶

커넥터를 설정하기 전에 다음 전제 조건을 완료했는지 확인합니다.

1. Openflow Connector for SQL Server 정보 을 검토했는지 확인합니다.

2. 지원되는 SQL 서버 버전 을 검토했는지 확인합니다.

3. 런타임 배포를 설정했는지 확인합니다. 자세한 내용은 다음 항목을 참조하십시오.

   • Openflow - BYOC 설정

   • Openflow - Snowflake 배포 설정.

4. |OFSFSPCS-plural|를 사용하는 경우 필수 도메인 구성</user-guide/data-integration/openflow/setup-openflow-spcs-sf-allow-list>`을 검토했는지와 :ref:`label-openflow_domains_used_by_openflow_connectors_sqlserver 커넥터의 필수 도메인에 대한 액세스 권한을 부여했는지 확인합니다.

SQL Server 인스턴스 설정하기¶

커넥터를 설정하기 전에 SQL Server 환경에서 다음 작업을 수행합니다.

1. 다음 SQL Server 예제에서와 같이 복제하려는 `데이터베이스<https://learn.microsoft.com/en-us/sql/relational-databases/track-changes/enable-and-disable-change-tracking-sql-server?view=sql-server-ver16#enable-change-tracking-for-a-database>`_ 및 `테이블<https://learn.microsoft.com/en-us/sql/relational-databases/track-changes/enable-and-disable-change-tracking-sql-server?view=sql-server-ver16#enable-change-tracking-for-a-table>`_에서 변경 내용 추적을 활성화합니다.

   ALTER DATABASE <database>
     SET CHANGE_TRACKING = ON
     (CHANGE_RETENTION = 2 DAYS, AUTO_CLEANUP = ON);
   
   ALTER TABLE <schema>.<table>
     ENABLE CHANGE_TRACKING
     WITH (TRACK_COLUMNS_UPDATED = ON);
   

   Copy

   참고

   복제하려는 모든 데이터베이스와 테이블에 대해 이러한 명령을 실행합니다.

   커넥터를 사용하려면 복제를 시작하기 전에 데이터베이스와 테이블에서 변경 내용 추적을 활성화해야 합니다. 복제하려는 모든 테이블에서 변경 내용 추적이 활성화되어 있는지 확인합니다. 커넥터가 실행되는 동안 추가 테이블에서 변경 내용 추적을 활성화할 수도 있습니다.

2. SQL Server 인스턴스에 대한 로그인을 생성합니다.

   CREATE LOGIN <user_name> WITH PASSWORD = '<password>';
   

   Copy

   이 로그인은 복제하려는 데이터베이스의 사용자를 생성하는 데 사용됩니다.

3. 각 데이터베이스의 SQL Server 명령을 실행하여 복제 중인 각 데이터베이스에 대한 사용자를 생성합니다.

   USE <source_database>;
   CREATE USER <user_name> FOR LOGIN <user_name>;
   

   Copy

4. 복제 중인 각 데이터베이스에 대한 SELECT 및 VIEW CHANGE TRACKING 권한을 사용자에게 부여합니다.

   GRANT SELECT ON <database>.<schema>.<table> TO <user_name>;
   GRANT VIEW CHANGE TRACKING ON <database>.<schema>.<table> TO <user_name>;
   

   Copy

   복제하려는 모든 테이블에 대해 각 데이터베이스에서 이러한 명령을 실행합니다. 이러한 권한은 이전 단계에서 생성한 각 데이터베이스의 사용자에게 부여되어야 합니다.

5. (선택 사항) SSL 연결을 구성합니다.

   SSL 연결을 사용하여 SQL Server에 연결하는 경우 데이터베이스 서버의 루트 인증서를 만듭니다. 이는 커넥터를 구성할 때 필요합니다.

Snowflake 환경 설정하기¶

Snowflake 계정 관리자는 다음 작업을 수행합니다.

1. Snowflake에 대상 데이터베이스를 생성하여 복제된 데이터를 저장합니다.

   CREATE DATABASE <destination_database>;
   

   Copy

2. Snowflake :ref:`서비스 사용자<label-user-type-property>`를 생성합니다.

   CREATE USER <openflow_user>
     TYPE = SERVICE
     COMMENT='Service user for automated access of Openflow';
   

   Copy

3. 커넥터에 대한 Snowflake 역할을 생성하고 필요한 권한을 부여합니다.

   CREATE ROLE <openflow_role>;
   GRANT ROLE <openflow_role> TO USER <openflow_user>;
   GRANT USAGE ON DATABASE <destination_database> TO ROLE <openflow_role>;
   GRANT CREATE SCHEMA ON DATABASE <destination_database> TO ROLE <openflow_role>;
   

   Copy

   이 역할을 사용하여 Snowflake 데이터베이스에 대한 커넥터의 액세스를 관리합니다.

   대상 데이터베이스에 오브젝트를 생성하려면 액세스를 관리하는 데 사용되는 역할에 데이터베이스에 대한 :ref:`USAGE 및 CREATE SCHEMA 권한<label-database_privileges>`을 부여해야 합니다.

4. 커넥터에 대한 Snowflake 웨어하우스를 생성하고 필요한 권한을 부여합니다.

   CREATE WAREHOUSE <openflow_warehouse> WITH
     WAREHOUSE_SIZE = 'XSMALL'
     AUTO_SUSPEND = 300
     AUTO_RESUME = TRUE;
   GRANT USAGE, OPERATE ON WAREHOUSE <openflow_warehouse> TO ROLE <openflow_role>;
   

   Copy

   Snowflake recommends starting with a XSMALL warehouse size, then experimenting with size depending on the number of tables being replicated and the amount of data transferred. Large numbers of tables typically scale better with multi-cluster warehouses, rather than a larger warehouse size. For more information, see multi-cluster warehouses.

5. 키 페어 인증을 위한 공개 키와 개인 키를 설정합니다.

   1. 한 쌍의 보안 키(공개 및 비공개)를 생성합니다.

   2. 커넥터의 구성에 제공할 파일에 사용자의 개인 키를 저장합니다.

   3. Snowflake 서비스 사용자에게 공개 키를 할당합니다.

      ALTER USER <openflow_user> SET RSA_PUBLIC_KEY = 'thekey';
      

      Copy

      자세한 내용은 키 페어 인증 및 키 페어 순환 섹션을 참조하십시오.

커넥터 구성¶

데이터 엔지니어는 다음 섹션을 통해 커넥터를 설치하고 구성합니다.

커넥터 설치하기¶

1. Openflow 개요 페이지로 이동합니다. Featured connectors 섹션에서 :ui:`View more connectors`를 선택합니다.

2. Openflow Connector 페이지에서 커넥터를 찾아 Add to runtime 을 선택합니다.

3. Select runtime 대화 상자의 Available runtimes 드롭다운 목록에서 런타임을 선택하고 :ui:`Add`를 클릭합니다.

   참고

   커넥터를 설치하기 전에 커넥터가 수집한 데이터를 저장할 수 있도록 Snowflake에서 데이터베이스와 스키마를 생성했는지 확인하십시오.

4. Snowflake 계정 자격 증명으로 배포를 인증하고 런타임 애플리케이션이 Snowflake 계정에 액세스할 수 있도록 허용할지 묻는 메시지가 표시되면 Allow 를 선택합니다. 커넥터 설치 프로세스를 완료하는 데 몇 분 정도 걸립니다.

5. Snowflake 계정 자격 증명으로 런타임에 인증합니다.

커넥터 프로세스 그룹이 추가된 Openflow 캔버스가 표시됩니다.

커넥터 구성¶

커넥터를 구성하려면 다음 단계를 수행합니다.

1. 가져온 프로세스 그룹을 마우스 오른쪽 버튼으로 클릭하고 :ui:`Parameters`를 선택합니다.

2. :ref:`label-of_sqlserver_flow_parameters`에 설명된 대로 필수 매개 변수 값을 채웁니다.

복제에 테이블을 제거했다가 다시 추가하기¶

복제에서 테이블을 제거하려면 복제 매개 변수 컨텍스트의 포함된 테이블 이름 또는 포함된 테이블 정규식 매개 변수에서 테이블을 제거합니다.

나중에 복제에 테이블을 다시 추가하려면 먼저 Snowflake에서 해당 대상 테이블을 삭제합니다. 그런 다음 테이블을 포함된 테이블 이름 또는 포함된 테이블 정규식 매개 변수에 다시 추가합니다. 그러면 테이블에 대한 복제 프로세스가 새로 시작됩니다.

이 접근법은 실패한 테이블 복제 시나리오에서 복구하는 데에도 사용할 수 있습니다.

[
    {
        "schema": "<source table schema>",
        "table" : "<source table name>",
        "included": ["<column name>", "<column name>"],
        "excluded": ["<column name>", "<column name>"],
        "includedPattern": "<regular expression>",
        "excludedPattern": "<regular expression>",
    }
]

customers_1234_1
customers_1234_2
orders_5678_1
orders_5678_2

플로우 실행¶

1. 평면을 마우스 오른쪽 버튼으로 클릭하고 Enable all Controller Services 를 선택합니다.

2. 가져온 프로세스 그룹을 마우스 오른쪽 버튼으로 클릭하고 Start 를 선택합니다. 커넥터가 데이터 수집을 시작합니다.