管理外存
为便于后续快速读取任务相关信息,Tapdata 会将任务的必要配置、共享缓存等信息存储至内部的 MongoDB 数据库中。为存储更多的数据(如缓存数据),您可以创建一个外部数据库来存储相关数据。
前提条件
已创建用作数据存储的外部数据库,当前支持 MongoDB 和 RocksDB。
创建外存
登录 Tapdata 平台。
在左侧导航栏,选择系统管理 > 外存管理。
在页面右侧,单击创建外存。
在弹出的对话框中,根据下述说明完成配置。
- 外存名称:填写具有业务意义的换成名称,便于后续识别。
- 外存类型:支持 MongoDB 和 RocksDB。
- 存储路径:填写数据库连接地址,例如 MongoDB 格式参考:
mongodb:/admin:password@127.0.0.1:27017/mydb?replicaSet=xxx&authSource=admin
,如选择为 RocksDB,此处填写路径即可。 - 外存表名:填写存储的目标表名,仅当外存类型为 MongoDB 时需设置。
- 设为默认:选择是否作为默认外存。
单击确定。
使用外存
您可以在共享缓存、部分处理节点(如连接节点)中使用刚刚配置的外存,示例如下: