Skip to content

Release v3.7.1

Compare
Choose a tag to compare
@baisui1981 baisui1981 released this 05 May 10:30

Abstract

TIS的v3.7.1版本终于要与大家见面了,v3.7.1着重在以下几方面进行了功能加强和升级。

  1. TIS与Apache Zeppelin无缝整合

    Apache Zeppelin 是一款让交互式数据分析变得可行的基于网页的开源框架。Zeppelin提供了数据分析、数据可视化等功能。经过与TIS无缝整合之后,用户可以在TIS中方便观测各数据源
    中数据的状态。TIS中安装及使用Zeppelin说明

  2. 重新整理TIS中离线调度功能

    目前TIS中支持的离线调度引擎为Spark,Hive,AliyunODPS,用户可以一站式地在TIS中抽取数据,并且通过离线分析引擎进行T+1数据分析操作
    详细请查看

  3. 支持用户在数据库系统中采用分表策略

    生产环境中使用分表策略是DBA经常使用的应对海量数保存的一种方法,在本版本中以优雅的方式支持物理分表合并导入目标数据端,
    详细请查看

  4. 添加Kafka Sink Connector插件

    添加Kafka Sink Connector插件,支持canal和debezium两种格式,#179, 另外修改了flink的flink-json模块
    在消息体中添加了source表名和生成记录的时间戳 qlangtech/flink@9844b37

Bug Fix

  • [bug]After the ftp synchronization doris task is successfully created, an error message is displayed if you click the Generate script#211
  • [bug]ftp file data synchronization doris error#207
  • 通过插件池安装tis-hive-plugin失败#200
  • 希望能提供一下mysql-SR没有主键不能建立实时通道的问题,辛苦了。#198
  • 3.7 mysql 实时任务到 es有bug ,任务编译不了#194
  • [Oracle->Doris] Chunjun Source 实时同步异常#192
  • [mysql->doris]JdbcInputFormat.getMaxValueFromDb Faild And Instantiation classLoader of Source Flink-CDC-MySQL Faild#184
  • mysql synchronize clickhouse#182
  • mysql -> elastic 增量同步增量脚本生成出错#178
  • MySQL -> Doris 实现增量通道分区表增量通道出错#176
  • mysql->doris BIGINT(20) UNSIGNED 类型映射 失败#175
  • oracle-> starRocks 增量实时脚本生成有误#173
  • 当源表有选取部分列同步,开启flink 增量同步会出错#170
  • Flink Server side JM TM启动 classloader 初始化并发异常#169
  • Mysql Writer datasource selection faild#106

New Feature

  • TIS 中支持阿里云 odps导入及基于MaxComputer的离线数据分析#183
  • The save path of StreamUberJar shall be changed#180
  • 增加 source & sink 端kafka#179
  • starRocks Sink 端改造层chunjun类型的端#174
  • add control flag startNewChain when use flink-cdc as Stream Source#164
  • 实现TIS与Zeppling的整合弥补TIS在数据可视化方面的短板#161
  • 实现数据通道删除功能#158
  • 同库相同表结构表名不一样的表无法写入到相同的一张目标表#150
  • 希望TIS 支持删除实例,目前实例只能新增#122
  • Assemble节点中Dag调度并发度控制#119

Installation

Related Projects