大数据基础平台有哪些

大数据基础平台主要包括Hadoop、Spark、Flink、HBase、Kafka等。

1.Hadoop：这是一个开源的分布式计算框架，由Apache基金会开发。Hadoop主要由HDFS（分布式文件系统）和MapReduce（分布式计算模型）两部分组成，可以处理海量数据。

2.Spark：Spark是UCBerkeleyAMPlab所开源的集群计算系统，相较于HadoopMapReduce能提供更为高效的计算性能。Spark支持批处理、交互式查询、流处理和机器学习等多种计算模式。

3.Flink：Flink是一个用于处理无界和有界数据的流处理框架，它能够在有状态的数据流上提供精确一次的语义。

4.HBase：HBase是一个分布式的、面向列的开源数据库，是Hadoop的一部分。它提供随机访问、高吞吐量以及对非常大量的数据的管理能力。

5.Kafka：Kafka是一个开源的流处理平台，由LinkedIn开发并贡献给Apache基金会。Kafka主要用于构建实时数据管道和流应用程序，能够将数据实时地在生产者、消费者和存储系统之间进行传输。

拓展资料：

1.Hadoop和Spark都可以运行在YARN（YetAnotherResourceNegotiator）上，YARN是Hadoop的资源管理器，为上层应用提供了统一的资源管理和调度。

2.Flink和Spark都支持SQL查询，使得数据处理更加方便。

3.HBase是一个NoSQL数据库，适合存储非结构化和半结构化的数据。

4.Kafka支持多种数据消费模式，包括Pull模式和Push模式。

5.大数据基础平台还包括其他一些工具，如Hive（数据仓库工具）、Pig（数据处理工具）、Zookeeper（分布式协调服务）等。

以上就是大数据基础平台的一些主要类型，不同的平台有着不同的特性和适用场景，可以根据实际需求选择合适的大数据基础平台。