当前位置:首页 > 大数据 > 正文

大数据分析框架有哪几种

4.SamzaSamza是LinkedIn提供的资源,是一个致力于实时数据处理的分布式流处理框架,与Twitter的streamprocessingsystemStorm非常相似。

大数据的技术框架主要包括分布式存储、分布式计算、流计算、关键数据挖掘分析、数据可视化等技术。

Sparkstreaming、实时计算-Storm,SparkStreaming,S4,HeronK-V,NOSQL数据库-HBase,Redis,MongoDB资源管理-YARN,Mesos日志采集-Flume,Scribe,Logstash,Kibana消息系统-Kafka,StormMQ,ZeroMQ,RabbitMQ问题分析:Hive、ApacheHadoop是批处理的专用框架。

1.批处理批处理是大数据处理中的常见需求。