关于MapReduce的shuffle过程,叙述正确的是________。
A. Shuffle分为Map任务端的Shuffle和Reduce任务段的Shuffle
B. Map任务的输出结果不是立即写入磁盘,而是首先写入缓存
C. 并非所有场合都可以使用合并操作
D. 每个Reduce任务真正开始之前,大部分时间都在从Map端领取所需的数据
查看答案
两个键值对<"hello",1>和<"hello",1>,如果对其进行归并(merge),会得到<"hello",<1,1>>,如果对其进行合并(combine),会得到<"hello",2>。
A. 对
B. 错
HDFS集群开始启动时,其处于安全模式,可以进行读操作,不能进行写操作。
A. 对
B. 错
HDFS是分布式文件系统,其命名空间包括块、目录和文件。
A. 对
B. 错
Map的主要工作是将多个任务的计算结果进行汇总。
A. 对
B. 错