基于Spark Streaming的视频/图像流处理与新的性能评估方法
【出 处】:
SPARK
Streaming
CPU时间占用率
分布式
视频/图像处理
spark str
【作 者】:
黄文辉
[1] ;
冯瑞
[2]
【摘 要】
智能视频监控技术在公共安全、交通管理、智慧城市等方面有着广泛的运用前景,需求日益增长。随着摄像头安装的数量越来越多,采集的图像数据量越来越大,靠单台计算机处理已经远远不能满足需求了。分布式计算的兴起与发展为解决大规模的数据处理问题提供了很好的途径。使用一种基于SparkStreaming的视频/图像流处理的测试平台,阐述了平台的构成和工作流程,深入研究各个参数对集群性能的影响,创新性地提出了CPU时间占用率作为性能评估指标,与总的处理时间结合,更为全面反映集群性能和资源利用率。
相关热词搜索:
上一篇:一种基于改进的DBSCAN的面向海量船舶位置数据码头挖掘算法
下一篇:海量气象数据实时解析与存储系统的设计与实现