面向大数据流式计算的任务管理技术综述
【出 处】:
【作 者】:
梁毅
侯颖
陈诚
金翊
北京工业大学计算机学院
北京100124
北京市计算中心
北京100094
【摘 要】流式计算是大数据的一种重要计算模式,大数据流式计算已成为研究热点。任务管理是大数据流式计算的核心功能之一,负责对流式计算的任务进行资源调度及全生命周期管理。目前对于大数据流式计算的技术调研工作主要集中于流式计算应用需求、体系结构及整体技术,缺乏对大数据流式计算任务管理技术的精细化调研分析。首先给出流式计算任务管理的抽象功能模型,其次基于该模型对任务管理的关键技术进行了分类和综述,最后对既有主流的大数据流式计算系统对上述关键技术的应用、集成和优化进行了调研分析。
相关热词搜索: 大数据流式计算 任务管理 抽象功能模型 资源分配 数据分发 容错
上一篇:Spark下的并行多标签最近邻算法
下一篇:最后一页