跳到主要内容
版本:v5.7

Elasticsearch

配置要求​

在进行配置之前,请务必检查您的 Elasticsearch 数据节点是否符合平台要求,参考如下:

要求详情
版本要求支持 6.x、7.0-7.17
+ Elasticsearch 7.0-7.17
- 推荐版本为7.12.1以上
权限要求数据读取需要 index 读取权限、创建快照权限。数据写入需要 create、create_doc、create_index、delete、delete_index、index 或 write 权限。
其他要求DataPipeline 通过解析索引的 mapping 获取索引结构信息,未映射到 mapping 中的字段将不会被识别进行数据同步。DataPipeline 暂不支持 OSS 版本 Elasticsearch。

操作步骤​

新建弹窗界面选择了 Elasticsearch 节点类型之后,显示 Elasticsearch 的基本信息配置模板:

  • 版本:6.x、7.x
  • 服务器地址:输入连接数据节点服务器地址以及端口号。集群模式 Elasticsearch 请输入该集群全部节点地址以及端口号。
  • 数据库名称:要求连接数据库的名称,默认值为 PROD。
  • 认证类型:信任认证、口令认证、LDAP
    • 选择信任认证时,无需输入用户名和密码
    • 选择口令认证时,需要填写可访问该数据节点的用户名和密码
    • 选择 LDAP 时,需要填写可访问该数据节点的用户名和密码
    • 连接参数:非必填项,DataPipeline 为您提供了 Elasticsearch 节点连接的默认参数,您可根据实际情况修改或添加参数配置。
KEYVALUE含义
SCROLL_SAVE_TIME10游标保存时间为 10min
READ_SIZE100每次读取 100 条文档