spark structured-streaming原生写入tidb需求

🛸 其他技术问题 TiSpark
1
  • 【TiDB 版本】：4.0.2
  • 【问题描述】：请问tidb4.0 是否提供了spark structured-streaming原生写入tidb的api。
2

现在已经支持直接写 TiKV，建议使用 spark2.3 + ， TiDB 4.0 以后的版本

https://github.com/pingcap/tispark/blob/master/docs/datasource_api_userguide.md

3

感谢答复，这个是dataframe写入的api，我想要spark structured-streaming写入tikv的api，类似这样：

aggDF
  .writeStream
  .outputMode("complete")
  .format("console")
  .start()
4

目前只支持批量模式写入tikv，流式计算可以通过jdbc写入(把tidb当成mysql)