Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

协力共建,繁荣TIS数据端类型 #234

Open
baisui1981 opened this issue Jun 2, 2023 · 6 comments
Open

协力共建,繁荣TIS数据端类型 #234

baisui1981 opened this issue Jun 2, 2023 · 6 comments

Comments

@baisui1981
Copy link
Member

baisui1981 commented Jun 2, 2023

动机

TIS目前已经实现的数据端类型,以及支持的读写类型方式描述:https://tis.pub/docs/plugin/source-sink

随着大数据生态的繁荣,有越来越多的数据端在涌现,凭借TIS优良的可插拔扩展性,目标将生态中的长尾头部及尾部的数据端都囊括其中。

为此,需要社区中有兴趣的小伙伴一起协力共建。

目前计划中需要实现的端有以下几种

最右侧列issue 有内容的说明已经提上日程,没有说明仅有意向

端类型 批读 批写 实时读 实时写 issue
RocketMQ
SqlServer
Apache Paimon #228
AWS S3 #202
AWS Glue S3 #202
DB2 #188
RabbitMQ #185
TiDB #214
CSV #241
tDengine #246 #247
redis
dameng(达梦) #262
AliyunODPS
mongo
kafka
postgresql
(flink-cdc版本)
#291
MariaDB #307

用户还需要其他端类型请回复此Issue

回复内容可以按照一下格式:

  • 端类型:xxxx
  • 批量读:y / n
  • 批量写:y / n
  • 增量读:y / n
  • 增量写:y / n
  • 联系方式:钉钉号/微信号
  • 有意向贡献:y / n
@baisui1981 baisui1981 changed the title 计划实现的端 协力共建,繁荣TIS数据端类型 Jun 2, 2023
@baisui1981 baisui1981 pinned this issue Jun 2, 2023
@kuweilong
Copy link

kuweilong commented Jun 2, 2023

tidb实时读取数据
端类型:tidb
批量读:可以使用mysql连接方式
批量写:可以使用mysql连接方式
增量读:y / n
增量写:可以使用mysql连接方式
联系方式:钉钉号/pz7hxyl
有意向贡献:y

@baisui1981
Copy link
Member Author

tidb实时读取数据 端类型:tidb 批量读:可以使用mysql连接方式 批量写:可以使用mysql连接方式 增量读:y / n 增量写:可以使用mysql连接方式 联系方式:钉钉号/pz7hxyl 有意向贡献:y

正在编写开发者工具到时候联系你,一起协作
#233

@a110q
Copy link

a110q commented Jun 26, 2023

端类型:csv
批量读:y
批量写:y
增量读:n
增量写:n
联系方式: a574681
贡献:n

@baisui1981
Copy link
Member Author

端类型:csv 批量读:y 批量写:y 增量读:n 增量写:n 联系方式: a574681 贡献:n

已经添加新的issue:#241

@caiqing0204
Copy link

caiqing0204 commented Jun 26, 2023

端类型:http/https
批量读:y
批量写:n
增量读:y
增量写:n
联系方式:1kh-9sitdophfo
贡献:n

说明:
接口数据是动态的,需要获取接口的动态数据,然后存储到writer中
类似Key是字段名称,Value就是字段对应的值

@baisui1981
Copy link
Member Author

baisui1981 commented Jul 31, 2023

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

No branches or pull requests

4 participants