用户登录
用户注册

分享至

flink datastream

  • 作者: 彩色B
  • 来源: 51数据库
  • 2020-09-24
flink是一个类似spark的“开源技术栈”,因为它也提供了批处理,流式计算,图计算,交互式查询,机器学习等。
  flink
也是内存计算,比较类似spark,但是不一样的是,spark的计算模型基于RDD,将流式计算看成是特殊的批处理,他的DStream其实还是
RDD。而flink吧批处理当成是特殊的流式计算,但是批处理和流式计算的层的引擎是两个,抽象了DataSet和DataStream。
  flink在性能上也标新很好,流式计算延迟比spark少,能做到真正的流式计算,而spark只能是准流式计算。而且在批处理上,当迭代次数变多,flink的速度比spark还要快,所以如果flink早一点出来,或许比现在的Spark更火。



  1、spark在sql上的优化,尤其是dataframe到dataset其实是借鉴的flink的。flink最初一开始对sql支持得就更好。
软件
前端设计
程序设计
Java相关