• 2022-11-02
    Map-Reduce任务在map阶段和reduce阶段数据输入格式是什么?
    A: JSON
    B: XML
    C: CSV
    D: Key/Value 键值对
  • D

    内容

    • 0

      智慧职教: reduce()函数会将map()函数输出的键值对作为输入,把相同key值的value进行汇总,输出新的键值对( )

    • 1

      MapReduce计算文件词频的例子中描述不正确的是? 包括了Split,Map,Shuffle,Reduce几个过程。在计算过程中数据始终以键值对的形式存在。|Split就是将输入文件中的内容按行分割为key和value的形式。Map阶段对每块的每一个单词为key,单词个数作为value排序进行输出。|在Shuffle阶段,会对map的输出按照key进行合并和排序。|Reduce的过程将所属key下的value进行了叠加,计算出单词key的次数。

    • 2

      Hadoop MapReduce计算的流程是________。 A: Map任务—Shuffle—Reduce任务 B: Map任务—Reduce任务—Shuffle C: Reduce任务—Map任务—Shuffle D: Shuffle—Map任务—Reduce任务

    • 3

      MapReduce任务过程分为两个处理阶段:map阶段和reduce阶段。

    • 4

      Shuffle连接Map和Reduce两个阶段。 Map Task将数据写到本地磁盘,Reduce Task从每个Map Task上读取一份数据。