STREAMING

作品数:388被引量:509H指数:11
导出分析报告
相关作者:汪璟玢申瑞民蔡志平梁毅戴永涛更多>>
相关机构:北京邮电大学上海交通大学北京工业大学中国科学院更多>>
相关期刊:更多>>
相关基金:国家自然科学基金国家重点基础研究发展计划国家科技支撑计划国家高技术研究发展计划更多>>
-

检索结果分析

结果分析中...
选择条件:
  • 期刊=计算机应用x
条 记 录,以下是1-5
视图:
排序:
基于Spark Streaming的快速视频转码方法被引量:2
《计算机应用》2018年第12期3500-3508,共9页付眸 杨贺昆 吴唐美 何润 冯朝胜 康胜 
国家自然科学基金资助项目(61373163);国家科技支撑计划项目(2014BAH11F02;2014BAH11F01);四川省科技支撑计划项目(2015GZ079)~~
针对单机视频转码方法转码速度较慢和面向批处理的并行转码方法效率提升有限的问题,基于Spark Streaming分布式流处理框架,提出了一种面向流处理的快速视频转码方法。首先,使用开源多媒体处理工具FFmpeg,构建了自动化的视频切片模型,提...
关键词:视频转码 SparkStreaming 分布式流处理 FFMPEG 弹性分布式数据集 
Spark Streaming框架下的气象自动站数据实时处理系统被引量:16
《计算机应用》2018年第1期38-43,55,共7页赵文芳 刘旭林 
中国气象局公益性行业科研专项基金资助项目(201206031)~~
针对现有气象自动站业务平台面临处理数据不及时、交互式响应慢、统计时效差等问题,提出了使用Spark Streaming技术和HBase解决该问题的方法,将实时计算框架和分布式数据库系统结合起来实现大规模流式数据处理。使用Flume收集自动站数据...
关键词:气象自动站 SPARK STREAMING 流计算 气象数据处理 FLUME 
Spark Streaming动态资源分配策略被引量:6
《计算机应用》2017年第6期1574-1579,共6页刘备 谭新明 曹文彬 
湖北省自然科学基金重点项目(2014CFA050)~~
针对Spark Streaming作为混合大数据计算平台流处理组件时资源调整周期长和不能满足多应用多用户个性化需求的问题,提出了一种多应用下动态资源分配策略(DRAM)。该策略增加了应用全局变量来控制动态资源分配过程。首先,获取历史执行数...
关键词:SPARK 实时数据流 多应用 动态资源分配 
基于Spark Streaming的实时数据分析系统及其应用被引量:30
《计算机应用》2017年第5期1263-1269,共7页韩德志 陈旭光 雷雨馨 戴永涛 张肖 
国家自然科学基金资助项目(61373028;61672338)~~
为了实现对实时网络数据流的快速分析,设计一种分布式实时数据流分析系统(DRDAS),能有效解决并发访问数据流的收集、存储和实时分析问题,为大数据环境的网络安全检测提供了一种有效的数据分析平台;根据Spark Streaming运行的原理设计一...
关键词:SPARK Streaming框架 分布式流处理 网络数据分析 分布式拒绝服务攻击 
基于Spark Streaming的实时能耗分项计量系统被引量:9
《计算机应用》2017年第4期928-935,共8页武志学 
能耗分项计量能够准确、及时、有效地发现能源使用问题,形成和实现最有效的节能措施。能耗分项计量系统需要对各项能源使用量在不同粒度上进行统计,既有实时性的需求,又需要涉及到聚合、去重、连接等较为复杂的统计需求。由于数据产生...
关键词:流式计算 能耗分项计量 SPARK STREAMING APACHE Kafka 大数据 
检索报告 对象比较 聚类工具 使用帮助 返回顶部