版本:v5.1
Elasticsearch
配置要求
在进行配置之前,请务必检查您的 Elasticsearch 数据节点是否符合平台要求,参考如下:
| 要求 | 详情 |
|---|---|
| 版本要求 | Elasticsearch 6.x、7.x |
| 权限要求 | 数据读取需要 index 读取权限、创建快照权限。数据写入需要 create、create_doc、create_index、delete、delete_index、index 或 write 权限。 |
| 其他要求 | DataPipeline 通过解析索引的 mapping 获取索引结构信息,未映射到 mapping 中的字段将不会被识别进行数据同步。DataPipeline 暂不支持 OSS 版本 Elasticsearch。 |
操作步骤
新建弹窗界面选择了 Elasticsearch 节点类型之后,显示 Elasticsearch 的基本信息配置模板:
- 版本:6.x、7.x
- 服务器地址:输入连接数据节点服务器地址以及端口号。集群模式 Elasticsearch 请输入该集群全部节点地址以及端口号。
- 数据库名称:要求连接数据库的名称,默认值为 PROD。
- 认证类型:信任认证、口令认证、LDAP
- 选择信任认证时,无需输入用户名和密码
- 选择口令认证时,需要填写可访问该数据节点的用户名和密码
- 选择 LDAP 时,需要填写可访问该数据节点的用户名和密码
- 连接参数:非必填项,DataPipeline 为您提供了 Elasticsearch 节点连接的默认参数,您可根据实际情况修改或添加参数配置。
| KEY | VALUE | 含义 |
|---|---|---|
| SCROLL_SAVE_TIME | 10 | 游标保存时间为 10min |
| READ_SIZE | 100 | 每次读取 100 条文档 |