可追溯性和数据主权来支持合
Posted: Thu Jul 10, 2025 8:25 am
随着由 Apache NiFi 提供支持的 Snowflake Openflow 的推出,Snowflake 正在通过强大的数据集成服务扩展其平台。adesso 被选为精英合作伙伴,专门测试和评估这款创新产品。
什么是 Snowflake Openflow?
Snowflake Openflow 是一款基于云的数据集成解决方案,已完全集成到 Snowflake 平台。它基于广受欢迎的开源软件 Apache NiFi,该软件以其在复杂数据集成中的易用性而闻名。它能够近乎实时地集成结构化数据和非结构化数据,例如文档、音频或传感器数据。这使企业能够高效、安全地编排、转换和管理数据流。
技术背景:Apache NiFi 与 Snowflake 的结合
Apache NiFi 最初由美国国家安全局 (NSA) 开发,专注于数据流自 顶级电子邮件列表 动化,重点关注已处理数据的安全性和可追溯性。该软件的特点是其用户友好的拖放界面以及实时监控和管理数据流的能力。Apache NiFi 支持众多连接器和处理器,可集成各种数据源和目标。
Snowflake Openflow 利用这些优势,并将其无缝集成到现有的 Snowflake 基础架构中。Openflow 为 Microsoft Dataverse、Kafka、Google Drive、Slack、Oracle、Jira、MySQL 等众多应用程序提供预定义连接器,显著简化了数据流。这些连接器遵循严格的设计原则,以确保性能、容错能力和易于配置性。这种开箱即用的安全性和可维护性使 Openflow 能够满足企业级应用的需求,并通过透明的规性和治理要求。
高级架构模型
Openflow 可以在您自己的云环境(BYOC,即“自带云”)中运行,目前在 AWS 上,或者很快将直接通过 Snowpark 容器服务 (SPCS) 运行。在这两种情况下,控制平面(即 Openflow 管道的监控和控制室)都位于 Snowflake 内部。数据平面(即引擎室)位于 BYOC 版本对应的云帐户中,而通过 SPCS 部署的则位于单独的 Snowflake 帐户中。这导致了不同的成本结构。
什么是 Snowflake Openflow?
Snowflake Openflow 是一款基于云的数据集成解决方案,已完全集成到 Snowflake 平台。它基于广受欢迎的开源软件 Apache NiFi,该软件以其在复杂数据集成中的易用性而闻名。它能够近乎实时地集成结构化数据和非结构化数据,例如文档、音频或传感器数据。这使企业能够高效、安全地编排、转换和管理数据流。
技术背景:Apache NiFi 与 Snowflake 的结合
Apache NiFi 最初由美国国家安全局 (NSA) 开发,专注于数据流自 顶级电子邮件列表 动化,重点关注已处理数据的安全性和可追溯性。该软件的特点是其用户友好的拖放界面以及实时监控和管理数据流的能力。Apache NiFi 支持众多连接器和处理器,可集成各种数据源和目标。
Snowflake Openflow 利用这些优势,并将其无缝集成到现有的 Snowflake 基础架构中。Openflow 为 Microsoft Dataverse、Kafka、Google Drive、Slack、Oracle、Jira、MySQL 等众多应用程序提供预定义连接器,显著简化了数据流。这些连接器遵循严格的设计原则,以确保性能、容错能力和易于配置性。这种开箱即用的安全性和可维护性使 Openflow 能够满足企业级应用的需求,并通过透明的规性和治理要求。
高级架构模型
Openflow 可以在您自己的云环境(BYOC,即“自带云”)中运行,目前在 AWS 上,或者很快将直接通过 Snowpark 容器服务 (SPCS) 运行。在这两种情况下,控制平面(即 Openflow 管道的监控和控制室)都位于 Snowflake 内部。数据平面(即引擎室)位于 BYOC 版本对应的云帐户中,而通过 SPCS 部署的则位于单独的 Snowflake 帐户中。这导致了不同的成本结构。