MapReduce和Apache Spark的区别
MapReduce是一个框架，利用这个框架，我们可以编写函数，以可靠的方式在商品硬件的巨大集群上并行处理大量数据。它也是一种处理方法和一种主要基于java的分布...
Apache Hive和Apache Spark SQL的区别
1. 1.Apache Hive : 在这个过程中，我们可以看到，很多时候都是在用自己的方式来表达自己的想法。Hive提供了一种简单的方法来实践大量非结构化事实...
大数据框架：Hadoop、Spark和Flink的区别
Hadoop是一个基于Apache的开源框架，用Java编写。它是著名的大数据工具之一，使用其文件系统HDFS(Hadoop分布式文件系统)提供分布式存储功能，...
Spark中groupByKey与reduceByKey算子之间的区别
Spark程序中的shuffle操作非常耗时，在spark程序优化过程中会专门针对shuffle问题进行优化，从而减少不必要的shuffle操作，提高运行效率；...