Skip to content

[Roadma] Release 1.16.0 #1547

@FlechazoW

Description

@FlechazoW

预计迭代周期:2个月(3月10号 - 5月10号):

功能迭代

文档

  1. 插件文档:因为我们的插件文档落后很多,所以需要把内部的一些插件文档重新更新到官网上;
  2. 基础使用文档:包括打包、编译、提交、基础使用、调试等内容;
  3. 自定义插件文档:包括脏数据插件、数据源插件、指标插件等;
  4. [Doc][ftp] ftp connector use demo and doc #1509
  5. 文档增加博客模块;

功能

  1. 使用新的source/sink api 重构 connector v2,并抽象一层 connector base;
  2. [Feature]chunjun支持流式文件传输的读写插件(文件传输功能) #1514
  3. [Feature][metricc] support metrics write external system #1505
  4. 升级高版本之后,cdc 支持到 2.x 版本;下游DDL还原待定;
  5. 全量 + 增量一体化验证;

新增插件

  1. phoenix 4 / 5 插件;
  2. tdengine 插件;
  3. iceberg 支持ddl/dml 还原iceberg;

BUG 修复

  1. 当使用sql脚本交换任务,从mysql或者其他关系型数据库到iceberg进行交换任务时,不支持设置任务模式,比如覆盖或者追加。 #1499
  2. [Bug] [hdfs] 字段分割符不生效问题,比如分割符\t  #1586
  3. [Bug] [hdfs] java.lang.NoSuchMethodException: com.dtstack.chunjun.connector.hdfs.source.HdfsPathFilter.<init>()  #1583
  4. [Bug] [jdbc-base] 间隔轮训数据条数量可能出现错误 #1581
  5. [Bug] [sybase] sybase not support sysname type #1579
  6. [Bug] [SqlserverCdc] SqlserverCdc job has been using an unavailable connection #1577
  7. [Bug] [sybase] sybase support double precision type #1575
  8. [Bug] [startrock] feNodes parameter verification problem  #1571
  9. [Bug] [sqlserver] if write column is not have identity column, not execute SET IDENTITY_INSERT %s ON #1568
  10. [Bug] [ftp] Data missing when synchronizing data from source to ftp #1567
  11. [Bug] [doris] 写入的数据中包含逗号时单条会变成多条记录 #1589

CI/CD

  1. 保证github ci/cd 流程完整;
  2. 完善单测内容,对新增的内容尽量提供单测;
  3. 增强 e2e 模块;

Metadata

Metadata

Assignees

No one assigned

    Labels

    No labels
    No labels

    Type

    No type

    Projects

    No projects

    Milestone

    No milestone

    Relationships

    None yet

    Development

    No branches or pull requests

    Issue actions