@fredzhang 在 Flink开发语言选型,PyFlink企业里面有在用的吗 中发帖
背景
我们主要做数据清洗,一些简单的数据计算
之前的主要场景是:
读取Kafka --> 简单的python进行程序处理 -->写入到多张MySQL表 或Kafka队列
读取 mysql表 → 数据处理 → 写到多张mysql表
现在想使用Flink 来做这种实时的处理,但是团队的成员主要用Python,之前的自研的实时处理框架也是基于Python来做的
PyFlink有企业里面实践过吗,坑多不
目前进行了简单的调研
PyFlink 纯TableSQL 的操作,性能和Java版本的基本上没区别
官方的PyFlink 也一直在更新
大家在企业里面,有真实使用过的吗,有坑吗