实时计算——聊一聊我所经历的计算框架

在聊实时计算以前，先说一下我对离线和批量、实时和流式的一些见解。数据库 咱们首先来简单看一下计算任务的大体流程：api 首先先说下批量计算和流式计算：缓存 图中显示了一个计算的基本流程，receiver处负责从数据源接收数据，并发送给下游的task，数据由task处理后由sink端输出。服务器 以图为例，批量和流式处理数据粒度不同，批量每次处理必定大小的数据块（输入通常采用文件系统），一个task

>>阅读原文<<