跳到主要内容
版本:v5.1

Snowflake

支持Snowflake云数仓作为数据同步目的地节点

节点写入方式权限要求其他说明
SnowflakeJDBC需要拥有对应表的SELETE、INSERT、UPDATE、DELETE、TRUNCATE、ALTER、DROP权限无
COPY需要拥有对应表的SELETE、INSERT、UPDATE、DELETE、TRUNCATE、ALTER、DROP权限COPY 写入模式通过 JDBC Driver 连接到 Snowflake 数仓,写入数据。执行插入操作时,通过 COPY 命令将数据导入目标表。执行删除操作时,通过 DELETE 命令从目标表中删除符合条件的数据。执行更新操作时,通过 UPDATE 实现数据更新。执行 MERGE 操作时,通过 MERGE INTO 的方式实现 MERGE。

节点身份验证方式​

节点身份验证支持两种方式:

  1. 基本身份验证:用户名、密码
  2. 密钥对认证:输入私钥和密钥口令的内容(如果已配置)
    1. 指定私钥位置
    2. 密码:如果私钥文件加密,还需提供加密密码

:::color3 注意:自2025年11月起,Snowflake将不再支持基本身份验证(用户名/密码),推荐使用密钥对认证

:::

节点特性​

表类型​

表类型JDBCCOPY
永久表(Permanent Table)支持支持

索引​

Snowflake不支持创建索引

数据类型​

分类数据类型JDBCCOPY说明
数字类型NUMBER✓✓
DECIMAL✓✓
NUMERIC✓✓
INT✓✓
INTEGER✓✓
BIGINT✓✓
SMALLINT✓✓
TINYINT✓✓
BYTEINT✓✓
FLOAT✓✓
FLOAT4✓✓
FLOAT8✓✓
DOUBLE✓✓
PRECISION✓✓
REAL✓✓
字符串类型VARCHAR✓✓
CHAR✓✓
CHARACTER✓✓
STRING✓✓在Snowflake中实际建表时,TEXT将被转换为VARCHAR(16777216)
TEXT✓✓在Snowflake中实际建表时,TEXT将被转换为VARCHAR(16777216)
VARBINARY✓✓
日期时间类型DATE✓✓
TIME✓✓
TIMESTAMP✓✓
TIMESTAMP_LTZ✓✓
TIMESTAMP_NTZ✓✓
TIMESTAMP_TZ✓✓
布尔类型BOOLEAN✓✓
半结构化类型VARIANT✓✓
OBJECT✓✓
ARRAY✓✓

约束类型​

约束类型JDBCCOPY
PRIMARY KEY✓✓
NOT NULL✓✓

DML​

写入策略说明
INSERT需要在目的地指定逻辑主键,如果未指定逻辑主键,将会按照无主键表策略写入数据。 当选择COPY写入方式后,执行插入操作时,通过 COPY 命令将数据文件导入目标表
DELETE需要在目的地指定逻辑主键,如果未指定逻辑主键,将会按照无主键表策略写入数据。
MERGE需要在目的地指定逻辑主键,如果未指定逻辑主键,将会按照无主键表策略写入数据。
IGNORE忽略

DDL​

DDL类型是否支持说明
删除表✓
清空表✓
重命名表✓
新增字段✓
删除字段✓
重命名字段✓
修改字段✓

添加Snowflake节点的操作步骤​

  • 新建弹窗界面选择了 Snowflake 节点类型,显示 Milvus 的基本信息配置模板:
    • 版本:Snowflake
    • 时区:默认时区为America/Los_Angeles,删除配置可在下拉框中选择其他时区
  • 连接配置
    • 账户标识符:格式通常为 <account>.<region>.<cloud_provider>.snowflakecomputing.com
    • 端口:输入 Snowflake 节点端口号,默认端口为443
    • 仓库:指定执行查询和加载操作的虚拟计算集群
    • 数据库:可选择「用户权限的所有库」或者输入特定「数据库名称」
    • schema:可选择「用户权限的所有schema」或者输入「指定schema」
    • 角色:非必填,若未配置角色连接时将指定用户默认角色
  • 认证类型
    • 口令认证:
      • 用户名:输入数据库登录用户名
      • 密码:输入用户对应密码
    • 密钥对认证:
      • 上传私钥文件
      • 输入私钥密码
      • 用户名
  • 连接参数:可配置Snowflake支持的连接参数