mesos属于大数据计算平台的哪类组件?
首先,一个典型的大数据解决方案,即大数据系统平台的构建,涉及多个层面,如数据采集传输、数据存储、数据计算、资源管理、任务调度等。在每个流程阶段,都有多个组件可供选择,关键是满足实际需求。举一些简单的例子来说明一些典型的组件:
文件存储:HadoopHDFS离线计算:HadoopMapReduce、Sparkstreaming、实时计算:Storm、SparkStreamingK-V、NOSQL数据库:Hbase、Redis、MongoDB资源管理:YARN、Mesos日志收集:Flume、Scribe、Logstash和Kibana消息系统:Kafka、StormMQ、ZeroMQ和RabbitMQ查询分析:Hive、Impala、Presto、Phoenix、SparkSQL、Flink、Kylin和Druid分布式协调服务:Zookeeper集群管理和监控:Ambari、Ganglia、Nagios