arroyo sql 处理

发布时间 2023-04-11 21:49:45作者: 荣锋亮

我在arroyo docker 镜像处理的时候简单说过一个arroyo 的编译服务,在看了官方介绍之后发现官方是有说明的

参考处理

  • 基于datafusion解析查询以及计划生成
  • 查询计划编译为arroyo 逻辑dataflow 计划
  • dataflow 逻辑计划,生成rust 代码
  • rust 代码编译为将在arroyo 工作节点的二进制文件

说明

对于sql 的处理我们经常会看到动态代码生成的处理(calcite 以及不少框架都存在类似的设计),只是arroyo自己处理了编译

参考资料

https://doc.arroyo.dev/concepts
https://www.cnblogs.com/rongfengliang/p/17305034.html