Releases: apache/seatunnel
[Stable] v1.5.1
[Feature] Add redisStream
input plugin.
[Feature] mongoDB
input plugin add parameter of schema, support specify schema by yourself.
[Enhancement] Support type of Nullable(Decimal(P, S)) with clickhouse
output plugin.
[Enhancement] Output plugin using parameter of format
rather than serializer
[Bugfix] Fix #492 #517 #534
注意:Waterdrop 提供可直接执行的软件包,没有必要自行编译源代码,请点击下面waterdrop-1.5.0.zip 下载。
如果Github下载速度慢,可通过百度云(链接:https://pan.baidu.com/s/19GUwZPC2YBG9Pt7iuF9TNw 密码:upeb) 直接下载。
备注:spark >= 2.3 下载 waterdrop-1.5.1.zip, spark < 2.3 下载waterdrop-1.5.1-with-spark.zip
[Stable]v1.5.0
- [Enhancement] Support Chinese column name with ClickHouse output.
- [Enhancement] Remove useless code with antlr4.
- [Enhancement] Support specify queue with -q or --queue.
- [Enhancement] Optimize batch processing,drop unnecessary coding.
- [Feature] Replace third party jar package(config-1.3.3-SNAPSHOT.jar) with waterdrop-config module .
- [Feature] Add filter plugin of urldecode and urlencode.
- [Bugfix] Fix #392 #411 (Config Parse bug).
- [Bugfix] Support specify
--driver-memory
with waterdrop config file in spark section (#507) .
注意:Waterdrop 提供可直接执行的软件包,没有必要自行编译源代码,请点击下面waterdrop-1.5.0.zip 下载。
如果Github下载速度慢,可通过百度云(链接:https://pan.baidu.com/s/1vCpGUcpSdyetLMMB39J2fg 密码:ullf) 直接下载。
备注:spark >= 2.3 下载 waterdrop-1.5.0.zip, spark < 2.3 下载waterdrop-1.5.0-with-spark.zip
Upgrade Guide
- If you upgrade from a previous version, you have to update all plugin dependencies that developed by yourself.
[Stable]v1.4.3
- [Feature] Support ClickHouse Cluster Mode using parame of
cluster
. Reading ClickHouse table ofsystem.clusters
- [Fixbug] Fix a bug of
checkConfig
when usingresult_table_name
rather thantable_name
- [Fixbug] Fix a bug of
MongoDB
in Spark Structured Streaming Output - [Enhancement] Update dependency of ElasticSearch to 7.6.2
- [Enhancement] Update dependency of clickhouse-jdbc to 0.2.4
注意:Waterdrop 提供可直接执行的软件包,没有必要自行编译源代码,请点击下面waterdrop-1.4.3.zip 下载。
如果Github下载速度慢,可通过百度云(链接:https://pan.baidu.com/s/1Qik5I1IGsgx1u26plSOFDg 密码:fqkr) 直接下载。
备注:spark >= 2.3 下载 waterdrop-1.4.3.zip, spark < 2.3 下载waterdrop-1.4.3-with-spark.zip
[Preview]2.0.0
- [Feature] Support Flink base on Flink 1.9
- [Feature] Use Maven instead of SBT
文档地址:https://interestinglab.github.io/waterdrop/#/zh-cn/v2/
如果Github下载速度慢,可通过百度云(链接:https://pan.baidu.com/s/1wrXrk6e6J_UNR6XYOLYu6A 密码:8sl9) 直接下载
[Stable]v1.4.2
- [Enhancement] MySQL input supports parallel loading data with
jdbc.partitionColumn
. - [Fixbug] Fix a bug that cannot use
result_table_name
in Hive and MongoDB input plugins.
注意:Waterdrop 提供可直接执行的软件包,没有必要自行编译源代码,请点击下面waterdrop-1.4.1.zip 下载。
如果Github下载速度慢,可通过百度云(https://pan.baidu.com/s/1haSd0KFMAS-qQZqI4QHWjA) 直接下载。
备注:spark >= 2.3 下载 waterdrop-1.4.2.zip, spark < 2.3 下载waterdrop-1.4.2-with-spark.zip
[Stable]v1.4.1
- [Enhancement] Structured streaming kafka input supports more complex json data.
- [Enhancement] Fix bug of structured streaming jdbc output. #364
- [Enhancement] File input supports specify format full qualified class name.
- [Fixbug] Fix a bug of waterdrop exit status.
注意:Waterdrop 提供可直接执行的软件包,没有必要自行编译源代码,请点击下面waterdrop-1.4.1.zip 下载。
如果Github下载速度慢,可通过百度云(https://pan.baidu.com/s/13VrqUkyZLYT0I8R1ajBvdw) 直接下载。
备注:spark >= 2.3 下载 waterdrop-1.4.1.zip, spark < 2.3 下载waterdrop-1.4.1-with-spark.zip
[Stable]v1.4.0
- [Feature] Add common options of source_table_name and result_table_name
- [Feature] Remove option of table_name
- [Enhancement] ClickHouse Output plugin compatible with Null message
- [Enhancement]
fields
of ClickHouse Output was set to unnecessary option - [Feature] ClickHouse output supports decimal
- [Feature] Support to develop input plugin with Java
- [Fixbug] Fix a bug of config parser, #353
注意:Waterdrop 提供可直接执行的软件包,没有必要自行编译源代码,请点击下面waterdrop-1.4.0.zip 下载。
如果Github下载速度慢,可通过百度云(https://pan.baidu.com/s/1SBh207x07eCmUHN5GHywfw) 直接下载。
备注:spark >= 2.3 下载 waterdrop 1.4.0.zip, spark < 2.3 下载waterdrop-1.4.0-with-spark.zip
[Stable]v1.3.8
- [Fix Bug] fixed a bug of config file variable substitution in spark section.
注意:Waterdrop 提供可直接执行的软件包,没有必要自行编译源代码,请点击下面waterdrop-1.3.5.zip 下载。
如果Github下载速度慢,可通过百度云(https://pan.baidu.com/s/1ZNehHx_Tpeiq530S_JetIA) 直接下载。
[Stable]v1.3.7
- [Feature] Support ClickHouse LowCardinality[T]
- [Enhancement] Do not output if dataset is empty
注意:Waterdrop 提供可直接执行的软件包,没有必要自行编译源代码,请点击下面waterdrop-1.3.5.zip 下载。
如果Github下载速度慢,可通过百度云(https://pan.baidu.com/s/1o0eMK4kqZaIzUHJhYdIT3g) 直接下载。
[Stable]v1.3.6
- [Enhancement] Kafka output plugin supports the parameter of
serializer
. #322
注意:Waterdrop 提供可直接执行的软件包,没有必要自行编译源代码,请点击下面waterdrop-1.3.5.zip 下载。
如果Github下载速度慢,可通过百度云(https://pan.baidu.com/s/1Gcs_GjDA7srMYiBQQCCXzg) 直接下载。