版本:v5.3
Snowflake
支持Snowflake云数仓作为数据同步目的地节点
| 节点 | 写入方式 | 权限要求 | 其他说明 |
|---|---|---|---|
| Snowflake | JDBC | 需要拥有对应表的SELETE、INSERT、UPDATE、DELETE、TRUNCATE、ALTER、DROP权限 | 无 |
| COPY | 需要拥有对应表的SELETE、INSERT、UPDATE、DELETE、TRUNCATE、ALTER、DROP权限 | COPY 写入模式通过 JDBC Driver 连接到 Snowflake 数仓,写入数据。执行插入操作时,通过 COPY 命令将数据导入目标表。执行删除操作时,通过 DELETE 命令从目标表中删除符合条件的数据。执行更新操作时,通过 UPDATE 实现数据更新。执行 MERGE 操作时,通过 MERGE INTO 的方式实现 MERGE。 |
节点身份验证方式
节点身份验证支持两种方式:
- 基本身份验证:用户名、密码
- 密钥对认证:输入私钥和密钥口令的内容(如果已配置)
- 指定私钥位置
- 密码:如果私钥文件加密,还需提供加密密码
:::color3 注意:自2025年11月起,Snowflake将不再支持基本身份验证(用户名/密码),推荐使用密钥对认证
:::
节点特性
表类型
| 表类型 | JDBC | COPY |
|---|---|---|
| 永久表(Permanent Table) | 支持 | 支持 |
索引
Snowflake不支持创建索引
数据类型
| 分类 | 数据类型 | JDBC | COPY | 说明 |
|---|---|---|---|---|
| 数字类型 | NUMBER | ✓ | ✓ | |
| DECIMAL | ✓ | ✓ | ||
| NUMERIC | ✓ | ✓ | ||
| INT | ✓ | ✓ | ||
| INTEGER | ✓ | ✓ | ||
| BIGINT | ✓ | ✓ | ||
| SMALLINT | ✓ | ✓ | ||
| TINYINT | ✓ | ✓ | ||
| BYTEINT | ✓ | ✓ | ||
| FLOAT | ✓ | ✓ | ||
| FLOAT4 | ✓ | ✓ | ||
| FLOAT8 | ✓ | ✓ | ||
| DOUBLE | ✓ | ✓ | ||
| PRECISION | ✓ | ✓ | ||
| REAL | ✓ | ✓ | ||
| 字符串类型 | VARCHAR | ✓ | ✓ | |
| CHAR | ✓ | ✓ | ||
| CHARACTER | ✓ | ✓ | ||
| STRING | ✓ | ✓ | 在Snowflake中实际建表时,TEXT将被转换为VARCHAR(16777216) | |
| TEXT | ✓ | ✓ | 在Snowflake中实际建表时,TEXT将被转换为VARCHAR(16777216) | |
| VARBINARY | ✓ | ✓ | ||
| 日期时间类型 | DATE | ✓ | ✓ | |
| TIME | ✓ | ✓ | ||
| TIMESTAMP | ✓ | ✓ | ||
| TIMESTAMP_LTZ | ✓ | ✓ | ||
| TIMESTAMP_NTZ | ✓ | ✓ | ||
| TIMESTAMP_TZ | ✓ | ✓ | ||
| 布尔类型 | BOOLEAN | ✓ | ✓ | |
| 半结构化类型 | VARIANT | ✓ | ✓ | |
| OBJECT | ✓ | ✓ | ||
| ARRAY | ✓ | ✓ |
约束类型
| 约束类型 | JDBC | COPY |
|---|---|---|
| PRIMARY KEY | ✓ | ✓ |
| NOT NULL | ✓ | ✓ |
DML
| 写入策略 | 说明 |
|---|---|
| INSERT | 需要在目的地指定逻辑主键,如果未指定逻辑主键,将会按照无主键表策略写入数据。 当选择COPY写入方式后,执行插入操作时,通过 COPY 命令将数据文件导入目标表 |
| DELETE | 需要在目的地指定逻辑主键,如果未指定逻辑主键,将会按照无主键表策略写入数据。 |
| MERGE | 需要在目的地指定逻辑主键,如果未指定逻辑主键,将会按照无主键表策略写入数据。 |
| IGNORE | 忽略 |
DDL
| DDL类型 | 是否支持 | 说明 |
|---|---|---|
| 删除表 | ✓ | |
| 清空表 | ✓ | |
| 重命名表 | ✓ | |
| 新增字段 | ✓ | |
| 删除字段 | ✓ | |
| 重命名字段 | ✓ | |
| 修改字段 | ✓ |
添加Snowflake节点的操作步骤
- 新建弹窗界面选择了 Snowflake 节点类型,显示 Milvus 的基本信息配置模板:
- 版本:Snowflake
- 时区:默认时区为America/Los_Angeles,删除配置可在下拉框中选择其他时区
- 连接配置
- 账户标识符:格式通常为 <account>.<region>.<cloud_provider>.snowflakecomputing.com
- 端口:输入 Snowflake 节点端口号,默认端口为443
- 仓库:指定执行查询和加载操作的虚拟计算集群
- 数据库:可选择「用户权限的所有库」或者输入特定「数据库名称」
- schema:可选择「用户权限的所有schema」或者输入「指定schema」
- 角色:非必填,若未配置角色连接时将指定用户默认角色
- 认证类型
- 口令认证:
- 用户名:输入数据库登录用户名
- 密码:输入用户对应密码
- 密钥对认证:
- 上传私钥文件
- 输入私钥密码
- 用户名
- 口令认证:
- 连接参数:可配置Snowflake支持的连接参数