Openflow 정보¶

주요 기능 및 이점¶

개방형 및 확장 가능

Apache NiFi 기반의 확장 가능한 관리형 서비스로, 모든 데이터 소스에서 모든 대상으로 프로세서를 구축하고 확장할 수 있습니다.

통합된 데이터 통합 플랫폼

Openflow를 사용하면 데이터 엔지니어가 자체 VPC 또는 Snowflake 배포 내부에 배포할 수 있는 완전 관리형 서비스를 통해 복잡한 양방향 데이터 추출 및 로딩을 처리할 수 있습니다.

엔터프라이즈 지원

Openflow는 데이터 통합을 위해 즉시 사용 가능한 보안, 규정 준수, 통합 표시 여부 및 유지 관리 기능 후크를 제공합니다.

모든 유형의 데이터에 대한 고속 수집

데이터 소스에서 거의 모든 규모의 정형 및 비정형 데이터를 배치 및 스트림 모드로 Snowflake로 처리할 수 있는 단일 통합 플랫폼입니다.

AI 처리에 대한 멀티모달 데이터의 연속 수집

거의 실시간에 가까운 비정형 데이터 수집으로 Sharepoint, Google Drive 등의 소스에서 가져온 데이터와 즉시 채팅할 수 있습니다.

Openflow - Snowflake Deployment 모델¶

Openflow는 BYOC(Bring Your own Cloud) 및 SPCS(Snowpark Container Services) 버전 둘 다에서 지원됩니다.

Openflow - Snowflake Deployment (SPCS)

미리 보기 기능 — 공개

Snowflake Openflow - Snowflake Deployment는 AWS 및 Azure :ref:`label-na_general_regions`의 모든 계정에서 사용할 수 있습니다.

Snowflake는 Openflow Snowflake Deployment에 대한 지원을 점진적으로 제공하고 있습니다. 이 전환 기간 동안 모든 계정에 이 새로운 기능이 포함되는 것은 아닙니다. 2025년 9월 17일부터 다음 몇 주 동안 Snowflake Openflow Deployment가 제공될 예정입니다.

:doc:`/developer-guide/snowpark-container-services/overview`(SPCS)를 사용하는 |OFSFSPCS|는 연결을 위한 간소화된 통합 솔루션을 제공합니다. 왜냐하면 SPCS는 Snowflake 내의 독립형 서비스이므로, 배포 및 관리가 쉽고 데이터 흐름을 실행하기 위한 편리하고 비용 효율적인 환경을 제공합니다. |OFSFSPCS|의 주요 이점은 Snowflake 보안 모델과의 네이티브 통합으로, 이를 통해 원활한 인증, 권한 부여, 네트워크 보안을 지원하고 운영을 간소화할 수 있습니다.

|OFSFSPCS-plural|를 구성할 때 :doc:`Openflow - Snowflake Deployment 설정<setup-openflow-spcs>`에 설명된 프로세스를 따릅니다.

Openflow BYOC

Openflow BYOC(Bring Your Own Cloud)는 조직의 클라우드 환경의 보안 범위 내에서 공용 및 개인 시스템을 안전하게 연결하고 민감한 데이터 전처리를 로컬에서 처리하는 데 사용할 수 있는 연결 솔루션을 제공합니다. BYOC는 Snowflake에서는 전체 Openflow 서비스 및 컨트롤 플레인을 관리하지만 Openflow 데이터 처리 엔진 또는 데이터 플레인은 자체 클라우드 환경 내에서 실행되는 배포 옵션을 나타냅니다.

BYOC 배포를 구성할 때 :doc:`setup-openflow-byoc`에 설명된 프로세스를 따릅니다.

사용 사례¶

최소한의 관리로 모든 소스에서 데이터를 가져와 모든 대상에 저장하고, Snowflake의 기본 제공 데이터 보안 및 거버넌스와 함께 사용하려는 경우 Openflow를 사용합니다.

Openflow 사용 사례는 다음과 같습니다.

• Google Drive 및 Box 같은 비정형 데이터 소스에서 데이터를 수집하여 AI 어시스턴트에서 Snowflake Cortex로 채팅이 가능하도록 준비하거나 자체 사용자 지정 처리에 데이터를 사용하도록 할 수 있습니다.

• 데이터베이스 테이블의 변경 데이터 캡처(CDC)를 Snowflake로 복제하여 포괄적인 중앙 집중식 보고를 할 수 있습니다.

• 실시간에 가까운 분석을 위해 Apache Kafka와 같은 스트리밍 서비스의 실시간 이벤트를 Snowflake로 수집하십시오.

• LinkedIn Ads와 같은 SaaS 플랫폼에서 Snowflake로 데이터를 수집하여 보고, 분석 및 인사이트를 얻을 수 있습니다.

• Snowflake 및 NiFi :doc:`프로세서<processors/index>`와 :doc:`컨트롤러 서비스<controllers/index>`를 사용하여 Openflow 데이터 흐름을 만듭니다.

보안¶

Openflow는 업계 최고의 보안 기능을 사용하여 계정과 사용자는 물론 Snowflake에 저장하는 모든 데이터에 대해 최고 수준의 보안을 보장합니다. 몇 가지 주요 측면은 다음과 같습니다.

인증

• 런타임은 OAuth2를 사용하여 Snowflake에서 인증을 받습니다.

인증

• Openflow는 RBAC 에 대해 세분화된 역할을 지원합니다.

• ACCOUNTADMIN 을 사용하여 배포 및 런타임을 생성할 수 있는 권한을 부여합니다.

전송 중 암호화

• Openflow 커넥터는 TLS 프로토콜을 지원하며, 데이터 수집을 위해 표준 Snowflake 클라이언트를 사용합니다.

• Openflow 배포와 Openflow 컨트롤 플레인 간의 모든 통신은 TLS 프로토콜을 사용하여 암호화됩니다.

시크릿 관리(BYOC)

• AWS 시크릿 관리자 또는 Hashicorp Vault와 통합. 자세한 내용은 구성 파일의 암호화된 비밀번호 섹션을 참조하십시오.

Private Link 지원

• Openflow 커넥터는 인바운드 AWS PrivateLink를 사용한 Snowflake에 대한 데이터 읽기 및 쓰기와 호환됩니다.

Tri-Secret Secure 지원

• Openflow Connector는 Tri-Secret Secure 와 호환되어 Snowflake에 데이터를 쓸 수 있습니다.

아키텍처¶

다음 다이어그램은 Openflow의 아키텍처를 보여줍니다.

배포 에이전트는 VPC에 Openflow 배포 인프라를 설치하고 부트스트랩할 뿐만 아니라 Snowflake 시스템 이미지 레지스트리에서 컨테이너 이미지를 정기적으로 동기화합니다.

Openflow 구성 요소에는 다음이 포함됩니다.

배포

배포는 개별 런타임 내에서 데이터 플로우가 실행되는 곳입니다. 여러 프로젝트, 팀 또는 SDLC 등의 이유로 단일 배포와 관련된 여러 런타임을 격리해야 하는 경우가 종종 있습니다.

컨트롤 플레인

컨트롤 플레인은 사용자가 Openflow UI 또는 Openflow APIs와의 직접 상호 작용을 통해 상호 작용하는 Openflow 서비스 및 API를 포함하여 관리 및 관측에 사용되는 모든 구성 요소가 포함된 아키텍처의 계층입니다. Openflow Snowflake Deployment에서 CP(컨트롤 플레인)는 Snowflake 소유의 공용 클라우드 인프라 및 서비스와 컨트롤 플레인 애플리케이션 자체로 구성됩니다.

Openflow - Snowflake Deployment

Openflow - Snowflake Deployment 서비스는 SPCS 컴퓨팅 풀을 사용하여 배포되며 가동 시간과 컴퓨팅 사용량에 따라 사용 요금이 부과됩니다. 자세한 내용은 Openflow Snowflake Deployment 비용 및 확장 고려 사항 섹션을 참조하십시오.

런타임

런타임은 보안, 단순성, 확장성을 제공하는 프레임워크로 데이터 파이프라인을 호스팅합니다. Openflow를 사용하여 VPC에서 Openflow 런타임을 배포할 수 있습니다. Openflow 커넥터를 런타임에 배포하고 Openflow 프로세서 및 컨트롤러 서비스를 사용하여 완전히 새로운 파이프라인을 구축할 수도 있습니다.

Openflow - Snowflake Deployment 런타임

Openflow - Snowflake Deployment 런타임은 Openflow - Snowflake Deployment 서비스로서 기본 컴퓨팅 풀로 표시되는 Openflow - Snowflake Deployment 배포에 배포됩니다. 고객은 사용자를 대신하여 서비스에 대한 요청을 실행하는 런타임 |OFSFSPCS|를 해당 배포를 통해 요청합니다. 생성되면 고객은 특정 |OFSFSPCS| 서비스에 대해 생성된 URL에서 웹 브라우저를 통해 액세스합니다.